使用Python走HDFS

Question

是否可以使用Python行走HDFS？如果有可能，我该怎么办？谢谢！

Answer 1

您可以查看一些库：

• libpydfs
• pydoop

Answer 2

基于libhdfs3的

hdfs3支持此

from hdfs3 import HDFileSystem
hdfs = HDFileSystem()
hdfs.walk('/path/to/directory')