从第1代Azure Data Lake商店获取元数据

时间:2019-01-16 22:09:56

标签: metadata azure-data-lake

我们想从文件系统中获取元数据。是否有像fsImage这样的东西来存储这样的medata信息?我们使用了以下命令:

curl -i -X GET -H 'Authorization: Bearer <REDACTED>' 'https://<yourstorename>.azuredatalakestore.net/webhdfs/v1/?op=LISTSTATUS'

但是,这仅列出了一级元数据。根据HDFS Api文档,尝试使用以下命令:

curl -i -X GET -H 'Authorization: Bearer <REDACTED>' 'https://<yourstorename>.azuredatalakestore.net/webhdfs/v1/?op=LISTSTATUS_BATCH&startAfter=<CHILD> #added code style

但是它给出了未实现的错误。

1 个答案:

答案 0 :(得分:0)

我检查了Azur的支持,他们提到并不是Hadoop提供的所有方法都已实现。因此,就我而言,LISTSTATUS_BATCH不适用。