Databricks笔记本电脑永久挂起

Question

实际上，我正在为ETL做一些数据框架工作，该数据框架是从Azure数据仓库读取的。并且似乎以某种方式使笔记本计算机永久挂起，但我不知道它在哪里以及为什么挂那么久！！！

任何人都有想法和经验吗？

Answer 1

在各种罕见的情况和极端情况下，可能会导致流式处理或批处理作业挂起。由于Databricks内部元存储已损坏，因此作业也可能挂起。

通常重新启动集群或创建新集群可以解决此问题。在其他情况下，请运行以下脚本来取消作业并收集笔记本信息，这些信息可以提供给Databricks支持。

有关更多详细信息，请参阅“ How to Resolve Job Hands and Collect Diagnostic Information”。

希望这会有所帮助。