让pig嵌入python脚本和pig-cassandra集成,与oozie协同工作



我是oozie的新手,没有什么问题。1) 我正试图在oozie中嵌入一个pig动作,它有一个python脚本导入。我已经将jython.jar文件放在了lib路径中,并在pig脚本中进行了导入,该脚本将使用python UDF。我似乎不太明白。.py文件未被拾取。怎么办?2) 我有一个pig-cassandra集成,在中我使用cql从使用pig的cassandra获得数据,并进行一些基本转换。在CLI中,我可以让它正常工作。但在oozie方面,我不是。我似乎没有在oozie中找到解决方案(配置和其他)。有人能帮我吗?提前谢谢。

这个问题已经解决。解决方案。。

1) 将python文件放在oozie worklow路径中,然后从这里引用if。

2) 在oozie的HDFS路径的lib文件夹中添加了cassandra-jar文件。

最新更新