将AWS S3存储桶根内容复制到子文件夹中的同一存储桶

时间:2019-06-17 09:59:57

标签: node.js amazon-s3 gulp aws-sdk aws-cli

我希望能够将同一存储桶中的文件从根目录复制到子文件夹中的子文件夹,但是使用aws-sdk排除该子文件夹。

即:

我想在gulp文件任务中使用此AWS-CLI命令:

aws s3 cp s3://bucketName s3://bucketName/last_good/YYYYMMDD --recursive --exclude "last_good/*"

我使用了How to copy/move all objects in Amazon S3 from one prefix to other using the AWS SDK for Node.js

中使用的复制示例

我只是不确定如何指定要排除的文件夹。在上面的示例中,该文件夹为last_good文件夹。

var gulp = require('gulp');
var AWS = require('aws-sdk');
var async = require('async');
var bucketName = 'bucketname';
var oldPrefix = '';
var newPrefix = 'last_good/20190817/';
var s3 = new AWS.S3({params: {Bucket: bucketName}, region: 'us-west-2'});

gulp.task('publish', function() {
     CopyToLastGood();
}

function CopyToLastGood() {
    var done = function(err, data) {
      if (err) console.log(err);
      else console.log(data);
    };

s3.listObjects({Prefix: oldPrefix}, function(err, data) {
  if (data.Contents.length) {
    async.each(data.Contents, function(file, cb) {
      var params = {
        CopySource: bucketName + '/' + file.Key,
        Key: file.Key.replace(oldPrefix, newPrefix)
      };
      s3.copyObject(params, function(copyErr, copyData){
        if (copyErr) { // an error occured
          console.log(err);
        }
        else {
          console.log('Copied: ', params.Key); //successful response
          cb();
        }
      });
    }, done);
  }
});

}

我希望root的内容更新last_good/20190817/,但不复制last_good文件夹本身。

1 个答案:

答案 0 :(得分:0)

我已经在s3.listObjects参数上使用定界符选项解决了我的解决方案。

即:

s3.listObjects({Prefix: oldPrefix, Delimiter:'/'}

这仅列出根目录内的文件。