hadoop - 更改hadoop中的复制因子

Question

我正在用 hadoop 做一些实验。为此，我必须使用一些配置选项，例如 block 的大小和复制因子。对于复制因子，我尝试了这个命令:

$HADOOP_HOME/bin/hadoop fs -setrep -w -R $var input

其中“input”是我要更改复制因子的文件，$var 代表我想要的复制因子。

当 $var=1 时，有效。否则，它会产生以下错误:

Replication 2 set: input
Waiting for input..............................................................
..................................

并且不断地加分。我能做什么？

Answer 1

由于你只有一个datanode，HDFS无法满足你的要求。 -w 标志意味着等到复制完成，这是永远不可能的。 Hadoop 只在每个节点上保留一个副本，因此单个节点不可能有大于 1 的复制因子。