使用Python和Pandas编写Apache Storm Spouts和Bolts

时间:2013-10-30 12:20:59

标签: python pandas apache-storm

我想将现有的基于python的实现(事件流上的数据分析工具)转换为风暴拓扑。

在研究阶段,我和我的团队使用python pandas来开发我们工具的原型,并发现它在程序员生产力方面非常有用。现在我们想要创建一个风暴拓扑,它做同样的事情,并且旨在重用我们现有的python模块作为螺栓,或者至少做出明智的决定,这样做是否是一个好主意。

使用python脚本取决于外部库作为集群上的Storm Bolt的任何限制?另外,对于我们的螺栓使用解释性和非JVM语言(如Python而不是Java)的性能损失是否有任何人感觉?大熊猫图书馆本身的设计考虑了高性能。

由于

0 个答案:

没有答案