从S3下载后,生成的Zip文件无效

时间:2020-02-12 13:06:57

标签: c# amazon-s3 .net-core aws-sdk

我正在创建一个看起来有效的zip文件,但是将其放入Amazon S3存储桶后始终无效。我正在使用System.IO.Compression进行任务,并使用AmazonS3Client进行上传:

private byte[] GenerateZipFile(string tenant)
{
   byte[] zipData;

   var results = QueryAggregateTable(tenant);
   using (var memoryStream = new MemoryStream())
   using (var archive = new ZipArchive(memoryStream, ZipArchiveMode.Create, true))
   {
      foreach (var item in results)
      {
          var archiveEntry = archive.CreateEntry($"{item.RowKey:D3}.json", CompressionLevel.Fastest);
          using (var entryStream = archiveEntry.Open())
          {
              var entryBytes = Encoding.UTF8.GetBytes(item.Data);
              entryStream.Write(entryBytes, 0, item.Data.Length);
          }
      }

      zipData = memoryStream.ToArray();
   }

   return zipData;
}

private async Task UploadToAmazon(byte[] zipData, string tenant)
{
    var bucketName = _config["egestionBucketName"];
    var configCreds = _config["egestionAwsCredentials"].Split(":");

    var awsCreds = new BasicAWSCredentials(configCreds[0], configCreds[1]);
    var awsRegion = Amazon.RegionEndpoint.GetBySystemName(_config["egestionRegionEndpointSystemName"]);

    var s3Client = new AmazonS3Client(awsCreds, awsRegion);
    using (var stream = new MemoryStream(zipData))
    {
        var putRequest = new PutObjectRequest
        {
            BucketName = bucketName,
            Key = $"{tenant}-{DateTime.UtcNow.ToString("s")}.zip",
            InputStream = stream,
            CannedACL = S3CannedACL.BucketOwnerFullControl
        };

        await s3Client.PutObjectAsync(putRequest);
    }

}

从世代返回后,字节数组看起来不错,并且上载方法确实将具有正确名称的文件加载到存储桶中。当我尝试下载该文件进行检查时,无法打开并显示一条消息,指出该文件无效。

我在异步/等待方面遇到了一些问题,怀疑可能与之相关,但是我没有找到PutObject的非异步选项。任何帮助表示赞赏。

1 个答案:

答案 0 :(得分:1)

这不是异步等待问题。

在存档有机会将所有数据写入流之前,先收集内存流中的字节。上传的档案不完整,因此下载时无效。

移动

virsh destroy -f

到归档文件vagrant global-status --prune块的外部,以便在处理归档文件时将所有缓冲的数据刷新到备用流。

zipData = memoryStream.ToArray();
相关问题