将多个文件夹作为包含文件夹内容的新容器从本地存储上载到Azure

时间:2020-10-23 15:33:21

标签: azure powershell azure-powershell

我们拥有包含100个容器的Azure Blob存储帐户。文件结构如下所示:

container_01 | --somemedia.jpg --anothermedia.jpg

container_02 | --secondcontainersmedia.jpg - 等等 --AndSoOnAndSoOn

我的客户希望将所有容器下载到本地存储,以便在必要时可以将它们重新上传到Azure。经过研究后,我发现了这个blog post。从那里更新脚本以满足我的需要(只需从AzureRM更新到AZ以及我的个人连接和本地路径),我想出了以下合适的脚本来下载文件。

$destination_path = 'C:\Storage Dump Test'
$connection_string = '[Insert Connection String]'

$storage_account = New-AzStorageContext -ConnectionString $connection_string

$containers = Get-AzStorageContainer -Context $storage_account

Write-Host 'Starting Storage Dump...'

foreach ($container in $containers)
{
    Write-Host -NoNewline 'Processing: ' . $container.Name . '...'

    $container_path = $destination_path + '\' + $container.Name

    if(!(Test-Path -Path $container_path ))
    {
        New-Item -ItemType directory -Path $container_path
    }

    $blobs = Get-AzStorageBlob -Container $container.Name -Context $storage_account

    Write-Host -NoNewline ' Downloading files...'    

    foreach ($blob in $blobs)
    {        
        $fileNameCheck = $container_path + '\' + $blob.Name
        
        if(!(Test-Path $fileNameCheck ))
        {
            Get-AzStorageBlobContent `
            -Container $container.Name -Blob $blob.Name -Destination $container_path `
            -Context $storage_account
        }            
    }  

    Write-Host ' Done.'
}

Write-Host 'Download complete.'

所以现在我在本地存储上有一个目录,其中包含数百个包含媒体项目的文件夹。我需要创建一个PS脚本(或找到其他方法)来进行相反的操作-提取该目录中的所有文件夹,使用文件夹名称创建容器,然后将每个文件夹中的项目上传到相应的容器中。

我应该如何开始呢?

1 个答案:

答案 0 :(得分:0)

使用events.events而不是使用Azure cmdlet可以更快,更成功。要复制:

azcopy

它也可以创建容器:

azcopy copy '<local-file-path>' 'https://<storage-account-name>.<blob| dfs>.core.windows.net/<container-name>/<blob-name>'

azcopy可以下载整个容器,而无需指定每个文件。使用azcopy make 'https://mystorageaccount.blob.core.windows.net/mycontainer'

请参阅:https://docs.microsoft.com/en-us/azure/storage/common/storage-use-azcopy-v10