我的理解是dfs.replication提供了HDFS维护的复制数量。在core-default.xml中,我看到“file.replication”以及“s3.replication”,“ftp.replication”和“ s3native.replication“,请你提供关于这些变量重要性的任何意见
答案 0 :(得分:0)
Hadoop支持不同的FileSystem实现,所有这些属性都定义了用于其相应文件系统的复制因子。
fs.defaultFS
如果hdfs://
中定义的FileSystem方案是SELECT '2017-03-31'::DATE - '2017-03-01'::DATE AS daysCount
,那么将永远不会使用除HDFS之外的复制属性。