Thinbug
News
Livy长时间运行的上下文和共享缓存
时间:2019-11-24 11:15:06
标签:
apache-spark
livy
互联网上说Livy具有以下功能:
可被多个客户端用于多个Spark作业的长期运行Spark上下文
跨多个作业和客户端共享缓存的RDD或数据集
问题:
我正确地假设这两个功能实际上是相同的吗?意味着共享缓存是通过针对相同的长期运行的Spark上下文对不同的作业进行加总来实现的,对吗?否则,如何实现?
Livy长期运行的Spark Context有哪些用例?它们是否仅用于交互式查询,以减少在每个查询(例如DS团队)上创建上下文的等待时间/开销?
0 个答案:
没有答案
相关问题
使用长时间运行的值计算进行缓存
在共享主机中长时间运行WCF
MVC 5 Shared Long Running Task
ASP.NET Cache - 长时间运行的操作
具有长共享缓存和短浏览器缓存的CloudFront
Livy ERROR RSCClient:无法连接到上下文
如何将jar添加到正在运行的spark上下文中?
Apache Ignite缓存长期运行的事务
长时间运行的spark应用程序的缓存累积
Livy长时间运行的上下文和共享缓存
最新问题
我写了这段代码,但我无法理解我的错误
我无法从一个代码实例的列表中删除 None 值,但我可以在另一个实例中。为什么它适用于一个细分市场而不适用于另一个细分市场?
是否有可能使 loadstring 不可能等于打印?卢阿
java中的random.expovariate()
Appscript 通过会议在 Google 日历中发送电子邮件和创建活动
为什么我的 Onclick 箭头功能在 React 中不起作用?
在此代码中是否有使用“this”的替代方法?
在 SQL Server 和 PostgreSQL 上查询,我如何从第一个表获得第二个表的可视化
每千个数字得到
更新了城市边界 KML 文件的来源?