Azure数据工厂-CSV到Parquet-更改文件扩展名

Question

我已经创建了一个数据工厂，用于将CSV文件转换为Parquet格式，因为我需要保留原始文件名，因此我在管道上使用“保留层次结构”。转换工作正常，但生成的文件带有csv扩展名（预期输出）。是否可以使用任何开箱即用的选项来生成不带csv扩展名的文件名。我扫描了ADF当前支持的系统变量，它没有列出输入文件名作为掩盖文件扩展名的选项-https://docs.microsoft.com/en-us/azure/data-factory/control-flow-system-variables。编写自定义组件是唯一的选择吗？

感谢您的投入。

Answer 1

如果使用的是Azure Data Factory v2，则可以使用get metadata activity获取源数据集的文件名，然后将其传递到复制活动的输入和输出数据集。