在hadoop多节点群集上启动HDFS守护程序时出错

Question

同时发布Hadoop多节点设置。一旦我开始我的hdfs恶魔在主（宾/start-dfs.sh）

我确实在主人的日志下面找到了

starting namenode, logging to /home/hduser/hadoop/libexec/../logs/hadoop-hduser-namenode-localhost.localdomain.out
slave: Warning: $HADOOP_HOME is deprecated.
slave:
slave: starting datanode, logging to /home/hduser/hadoop/libexec/../logs/hadoop-hduser-datanode-localhost.localdomain.out
master: Warning: $HADOOP_HOME is deprecated.
master:
master: starting datanode, logging to /home/hduser/hadoop/libexec/../logs/hadoop-hduser-datanode-localhost.localdomain.out
master: Warning: $HADOOP_HOME is deprecated.
master:
master: starting secondarynamenode, logging to /home/hduser/hadoop/libexec/../logs/hadoop-hduser-secondarynamenode-localhost.localdomain.out

我确实在奴隶号上找到了下面的日志@

hadoop hduser数据节点本地主机。本地域。日志文件

有人能告诉我，设置有什么问题吗。

2013-07-24 12:10:59,373 INFO org.apache.hadoop.ipc.Client: Retrying connect to server: master/192.168.0.1:54310. Already tried 8 time(s); retry policy is RetryUpToMaximumCountWithFixedSleep(maxRetries=10, sleepTime=1 SECONDS)
2013-07-24 12:11:00,374 INFO org.apache.hadoop.ipc.Client: Retrying connect to server: master/192.168.0.1:54310. Already tried 9 time(s); retry policy is RetryUpToMaximumCountWithFixedSleep(maxRetries=10, sleepTime=1 SECONDS)
2013-07-24 12:11:00,377 ERROR org.apache.hadoop.hdfs.server.datanode.DataNode: java.io.IOException: Call to master/192.168.0.1:54310 failed on local exception: java.net.NoRouteToHostException: No route to host
        at org.apache.hadoop.ipc.Client.wrapException(Client.java:1144)
        at org.apache.hadoop.ipc.Client.call(Client.java:1112)

Answer 1

确保NameNode运行正常。如果它已经在运行，请查看连接中是否存在任何问题。您的DataNode无法与NameNode对话。确保已将机器的IP和主机名添加到从属设备的/etc/hosts文件中。请尝试将telnet连接到192.168.0.1:54310，看看您是否能够连接。

向我们展示NN日志会很有帮助。

编辑：

看看维基对这个问题有什么看法：当网络上的一台机器不知道如何向指定的机器发送TCP数据包时，你会得到一个TCP无路由主机错误——通常包裹在JavaIOExc0019中。

一些可能的原因（不是独家列表）：

• 配置文件中远程计算机的主机名错误
• 客户端的主机表//etc/hosts具有无效的目标主机IP地址
• DNS服务器的主机表具有无效的目标主机IP地址
• 客户端的路由表（在Linux中为iptables）错误
• DHCP服务器正在发布错误的路由信息
• 客户端和服务器位于不同的子网上，未设置为相互通信。这可能是个意外，也可能是故意锁定Hadoop集群
• 这些机器正在尝试使用IPv6进行通信。Hadoop目前不支持IPv6
• 主机的IP地址已更改，但长期存在的JVM正在缓存旧值。这是JVM的一个已知问题（有关详细信息和解决方案，请搜索“java负DNS缓存”）

快速解决方案：重新启动JVM。

这些都是网络配置/路由器问题。由于这是您的网络，只有您才能发现并跟踪问题。