在从一个集群传输到另一个集群时，是否在hadoop中加密了ENCRYPT数据

Question

我想知道distcp是否可以选择在从一个集群传输到另一个集群时加密数据。我知道它确实支持S3集群中的加密，但这与亚马逊的S3有关。如果我们将纯文本文件从一个簇移动到另一个簇，该怎么办？是加密还是发送纯文本？如果它支持，我们可以启用这种加密吗？

Answer 1

来自HDFS documentation：

  

一旦设置了KMS并且NameNode和HDFS客户端已经建立   正确配置，管理员可以使用hadoop密钥和hdfs加密   用于创建加密密钥和设置新加密的命令行工具   区域。可以通过将现有数据复制到新数据来加密现有数据   使用distcp等工具加密区域。

希望它有所帮助。