同一执行程序中的任务之间是否存在共享变量

时间:2018-05-23 19:51:07

标签: apache-spark

累加器和广播变量是在群集的所有节点中拥有共享变量的一种方法。虽然,但它们的使用存在限制。

我正在寻找一种存在于执行程序中的共享变量,并且该执行程序中运行的每个任务都可以更新和读取它。每个执行器可能具有该类型的不同实例,因此不会通过网络传输任何内容。这有什么解决方案吗?

0 个答案:

没有答案