dfs.replication提供复制因子,file.replication提供了什么

时间:2017-04-09 12:15:24

标签: hadoop hdfs hadoop2

我的理解是dfs.replication提供了HDFS维护的复制数量。在core-default.xml中,我看到“file.replication”以及“s3.replication”,“ftp.replication”和“ s3native.replication“,请你提供关于这些变量重要性的任何意见

1 个答案:

答案 0 :(得分:0)

Hadoop支持不同的FileSystem实现,所有这些属性都定义了用于其相应文件系统的复制因子。

fs.defaultFS

如果hdfs://中定义的FileSystem方案是SELECT '2017-03-31'::DATE - '2017-03-01'::DATE AS daysCount ,那么将永远不会使用除HDFS之外的复制属性。