我的零件文件带有s3目录,如下所示:
part-00001.gz
part-09999.gz
我需要将所有这些零件文件合并为2 GB的文件
这是我的命令:
s3-dist-cp --src s3://mybucket/bop/export/source/ --dest s3://mybucket/bop/export/destination/ --groupBy='.*(part).*' --targetSize=2048
但是我到达目的地的仍然是零件文件。
part-00001.gz
part-09999.gz
有人可以指出我做错了什么吗?