杀掉闲置的火花弹和Apache Zeppelins

时间:2017-01-17 10:59:15

标签: apache-spark apache-zeppelin

我有一个工程师和数据分析师团队,他们广泛使用Zeppelin,很多时候他们忘记关闭它并释放资源。

什么是在不损害长期工作的情况下自动杀死闲置工作的最佳解决方案?

2 个答案:

答案 0 :(得分:1)

目前没有自动停止解释器的解决方案。

答案 1 :(得分:0)

现在可以使用Zeppelin版本> = 0.8:

在0.8.0之前,Zeppelin没有解释器的生命周期管理。 用户必须通过UI明确关闭解释器。从...开始 0.8.0,Zeppelin提供了一个新的接口LifecycleManager来控制解释器的生命周期。目前,有2种实现方式: NullLifecycleManagerTimeoutLifecycleManager(默认设置)。

请参见Interpreter Lifecycle Management