一旦存储大量数据文件,webhdfs将无法访问hdfs目录

时间:2018-11-26 12:53:02

标签: hdfs webhdfs

我创建了一个目录并正在存储实时数据文件(我得到了大量)。我最初可以通过webhdfs访问该目录,但是由于数据文件的数量在限制后增加,因此我无法再访问该目录。 curl命令:curl -i“ http://host:port/webhdfs/v1/path?op=LISTSTATUS”可以正常工作并列出所有数据文件。 还能够通过hdfs命令导航目录结构。 但是只有webhdfs无法正常工作。它只是失败。

WebHDFS已启用。 尝试将每个目录的最大项目数设置为最大值。 尝试将socket.read_timeout设置为300s(5分钟),但是没有用。

请提出建议。

0 个答案:

没有答案