使猪嵌入python脚本和猪cassandra集成与oozie合作

时间:2013-11-17 20:51:42

标签: python hadoop cassandra apache-pig oozie

我是oozie的新手,我几乎没有问题。 1)我试图在oozie中嵌入一个猪动作,它有一个python脚本导入。我已将jython.jar文件放在lib路径中,并在pig脚本中导入一个将导入python UDF的导入。我似乎没有这个工作。 .py文件没有被提取。怎么去这个? 2)我有一个猪cassandra集成在哪里我使用cql从使用猪获取cassandra的数据并做一些基本的转换。在CLI中,我能够正常工作。但在oozie方面,我不是。我似乎没有找到在oozie中执行此操作的解决方案(配置和其他)。有人可以帮我这个吗?提前谢谢。

1 个答案:

答案 0 :(得分:0)

这已经解决了。解..

1)将python文件放在oozie worklow路径中,然后从这里引用if。

2)在oozie的HDFS路径中的lib文件夹中添加了cassandra jar文件。