Azure数据工厂数据流“设备上没有剩余空间”

时间:2020-09-26 19:34:09

标签: azure-pipelines azure-data-factory azure-data-flow

我正在Azure数据工厂中运行带有具有某些源和转换的数据流的管道,但是该管道运行了大约40个小时,然后由于错误而失败:

enter image description here

有一种方法可以调试此错误的原因?或“设备上没有剩余空间”是什么意思?

使用的数据位于数据湖中,然后尝试下沉到Azure Synapse数据库中。

谢谢

1 个答案:

答案 0 :(得分:0)

这是一个Spark错误,来自幕后工作。由于这是一个未捕获的例外,我建议您打开Azure支持票证,以便我们的工程师为您找到根本原因。

这里的根本原因可能是由于工作时间太长导致工人忙碌。为避免这种情况,我建议实施performance best practices来缩短工作时间,因为40个小时太长了。

谢谢, 丹尼尔