我们如何不使用distCp并像boto3一样直接将数据从hdfs复制到s3

Question

我想直接将数据从hdfs复制到s3，而不使用distCp。我该怎么做？我也使用了boto3库，但它仅用于从本地到s3的库，而不是从hdfs到s3的库。