如何识别azure blob输入数据集

Question

这是我的文件模式：adm_domain_20180401，adm_domain_20180402，这些来自一个特定来源。同一文件夹还包含adm_agent_20180401，adm_agent_20180402。我想只使用前缀adm_domain将文件从blob复制到ADL，有没有办法在输入数据集中定义文件模式？

数据集：

{     ＆＃34; name＆＃34;：＆＃34; CgAdmDomain＆＃34;，     ＆＃34;属性＆＃34;：{         ＆＃34;发布＆＃34;：false，         ＆＃34;输入＆＃34;：＆＃34; AzureBlob＆＃34;，         ＆＃34; linkedServiceName＆＃34;：＆＃34; flk_blob_dev_ls＆＃34;，         ＆＃34; typeProperties＆＃34;：{             ＆＃34; folderPath＆＃34;：＆＃34;传入/ {日期} /＆＃34;，             ＆＃34;格式＆＃34;：{                 ＆＃34;输入＆＃34;：＆＃34; TextFormat＆＃34;             }，             ＆＃34; partitionedBy＆＃34;：[                 {                     ＆＃34; name＆＃34;：＆＃34; Date＆＃34;，                     ＆＃34;价值＆＃34;：{                         ＆＃34;输入＆＃34;：＆＃34; DateTime＆＃34;，                         ＆＃34; date＆＃34;：＆＃34; SliceStart＆＃34;，                         ＆＃34;格式＆＃34;：＆＃34; yyyyMMdd＆＃34;                     }                 }             ]         }，         ＆＃34;可用性＆＃34;：{             ＆＃34;频率＆＃34;：＆＃34;分钟＆＃34;，             ＆＃34;间隔＆＃34;：15         }，         ＆＃34;外部＆＃34;：是的，         ＆＃34;政策＆＃34;：{}     } }

Answer 1

您使用的是ADF V1还是V2？我们正在努力在ADF V2中添加文件名通配符支持。

Answer 2

fileFilter无法使用Azure Blob Storage。如果您正在查看内部部署的文件，那么您可以通过指定用于选择folderPath中的文件子集的过滤器而不是所有文件来实现此目的 - link

仅为Azure Blob Storage使用Azure Data Factory自定义活动实现此目的。通过自定义代码（.NET）实现逻辑，并将其作为管道中的活动。有关如何使用自定义活动的更多信息 - further reading。