在我们的Hadoop集群（Cloudera发行版）中，我们最近发现Hive Job是由用户在＆＃39; / tmp＆＃39;中创建的160 TB文件启动的。位置，它几乎消耗了剩余的HDFS空间，并即将导致中断。之后我们排除故障并终止特定工作，因为我们无法联系到开始此工作的用户。
所以现在我的问题是我们能否为＆＃39; / tmp＆＃39;设置警报。如果有人创建了大量文件，或者我们需要限制使用HDFA配额的用户。如果您有任何其他建议，请分享。
答案 0 :(得分：2)
答案 1 :(得分：0)
您还可以从处理方管理Yarn资源池中Cloudera Manager的资源。您可以限制分配给群集上运行的每个用户或服务的最大内核和内存。