在hive cli </directory>中添加“<directory>”

时间:2012-08-30 03:13:27

标签: hadoop hive bigdata hadoop-streaming

我想要像

这样的东西
$hive
> ADD FILE <directory_path>;

将目录添加到配置单元的工作目录。

我正在使用hive 0.7 我需要这个来添加mapper / reducer脚本使用的python包 我有什么选择?

2 个答案:

答案 0 :(得分:1)

对于0.7.1,您可以使用shell escape(!)来运行!hadoop fs -mkdir <path>或“dfs”命令dfs -mkdir <path>。有关详细信息,请参阅cli wiki page。不确定这些是否在0.7以内。

答案 1 :(得分:0)

对我来说有用的是将所有内容(目录/文件)压缩为zip文件,并使用'{3}}

中所述的'ADD ARCHIVE'