Hadoop 2.9.0-Hadoop namenode-format和hdfs-site.xml dfs.namenode.name.dir

Question

为了学习，我正在4节点集群上安装Hadoop2.9.0。我已经按照Apache Hadoop 2.9.0的官方文档和一些google页面开始了namenode的安装/配置。

我编辑了位于$hadoop_home/etc/hadoop目录下的hdfs-site.xml,如下所示：

  <property>
    <name>dfs.namenode.name.dir</name>
    <value>file:///apps/hdfs/namenode/data</value>
  </property>
  <property>
    <name>dfs.datanode.data.dir</name>
    <value>file:///apps/hdfs/datanode/data</value>
  </property>
  <property>
    <name>dfs.namenode.checkpoint.dir</name>
    <value>file:///apps/hdfs/namesecondary/data</value>
  </property>

当我运行“hadoop namenode-format”时，它在/tmp/hadoop-hadoop/...下格式化默认的$hadoop.tmp.dir。

如果有人能帮助我理解这一点，那就太好了：）

多谢！

Answer 1

不清楚您遇到了什么问题，但hadoop_conf_dir有一个默认设置，它设置在hadoop-env.sh文件中，该文件在所有hadoop命令之前加载。

我相信这可能只是/etc/hadoop。至少，这是大多数集群存储配置的地方

由于您的文件在其他地方，您需要将该值导出到其他地方，这是很好的。