尝试设置hadoop本机库,因此我可以使用mapred pipes ...
当前所有作业均失败,这是因为hadoop安装未检测到snappy。以下是hadoop checknative -a
/usr/lib/x86_64/libsnappy.so|a|...
,但是hadoop checknative -a
仍然显示snappy: false
。snappy
安装了sudo apt get install snappy-dev
,同样的问题。ld -l snappy --verbose
,我发现在/usr/lib/x86_64/libsnappy.so
中发现了snappy,但是Hadoop先生仍然拒绝承认它的存在。libcrypto.so
,我将其与libsnappy.so
放在同一目录中,但是Hadoop会找到前者而不是后者。 rr。有什么想法吗?