复制级om Hadoop 3集群

Question

我有Hadoop3.0集群（为了学习目的），1个name-node和3个slave。在每个节点上，hdfs-site.xml如下所示：

<?xml version="1.0" encoding="UTF-8"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>
<configuration>
  <property>
        <name>dfs.data.dir</name>
        <value>/opt/hadoop/dfs/data</value>
        <final>true</final>
  </property>
  <property>
        <name>dfs.name.dir</name>
        <value>/opt/hadoop/dfs/name</value>
        <final>true</final>
  </property>
  <property>
        <name>dfs.replication</name>
        <value>2</value>
  </property>
</configuration>

在此输入图像说明

Answer 1

我猜这些文件是在您更改复制因子之前添加的吧？更改默认复制因子不会更改当前存储在群集上的任何文件。要更改这些,请运行：

hadoop dfs -setrep -w 2 -R /user/data

添加的任何新文件都应自动存储，复制因子为2。