我已经在Ubuntu15.10VM上以单节点模式安装了Hadoop2.6.0。当我使用./start-all.sh
命令启动Hadoop时,它全部工作,但当我启动Jps命令时,我查看
31602 NameNode 32453 Jps 32169 NodeManager 32045 ResourceManager
I报告以下日志文件
不推荐使用此脚本。而是使用start-dfs.sh和start-yarn.sh
在[localhost]上启动名称代码localhost:启动名称代码,登录到/usr/local/hadoop/logs/hadoop-ale-namenode-ale-hadoop.out localhost:启动数据阳极,登录到/usr/local/hadoop/logs/hadoop-ale-datanode-ale-hadoop.out启动辅助名称代码[0.0.0.0]0.0.0.0:启动辅助名称代码,登录到/usr/local/hadoop/logs/hadoop-ale-secondarynamenode-ale-hadoop.out启动纱后台进程启动resourcemanager,登录到
问题出在哪里?
谢谢你!
是的,start-all.sh确实被弃用了。相反,您必须使用start-dfs.sh。此外,您不能对name节点进行多次格式化,否则所有数据都将消失。您可能会忽略上面的警告,让它使用内置的java类。
我正试图在我的测试环境中部署一个基于3个节点的: 1个名称节点(主节点:172.30.10.64) 2个数据节点(slave1:172.30.10.72和slave2:172.30.10.62) 我在namenode中配置了主属性文件,在datananodes中配置了从属性文件。 主持人: hdfs站点。xml: 核心站点。xml: yarn-site.xml: mapred-site.xml:
mapred-site.xml(在主服务器和从服务器中) hdfs-site.xml(母版中) hdfs-site.xml(在从机中) yarn-site.xml(在主服务器和从服务器中) 主节点中的jps: slaves中的jps 向你问好
我一直在通过PuTTy登录到SSH来运行Hadoop MapReduce作业,这要求我在PuTTy中输入主机名/IP地址、登录名和密码,以获得SSH命令行窗口。进入SSH控制台窗口后,我将提供适当的MR命令,例如: hadoop jar /usr/lib/hadoop-0.20-mapreduce/contrib/streaming/hadoop-streaming-2.0.0-mr1-cdh4.
krish@krish-virtualbox:~$start-dfs.sh 14/10/20 13:16:16警告util.nativeCodeLoader:无法为您的平台加载本机Hadoop库...在适用的情况下使用内置Java类 正在[localhost]上启动名称代码 我只想知道在里面所有的东西是不是都很完美。我在清单中没有看到Datanode。
问题内容: 我尝试在Ubuntu 11.04和Java 6 sun上安装Hadoop。我正在使用hadoop 0.20.203 rc1构建。我在使用Java-6-sun的Ubuntu 11.04上反复遇到问题。当我尝试启动hadoop时,由于“无法访问存储”,datanode无法启动。 我曾尝试从Apache甚至cloudera的0.20分支中升级和降级到几个版本,还尝试再次删除并安装hadoop
我最近以单集群模式将hadoop 3.1.1安装到我的计算机上。之后,以下命令对hdfs-site.xml、yarn-site.xml、core-site.xml、mapred-site.xml和hadoop-env.sh进行了所有配置,没有任何错误 *start-all.sh 下面是yarn-site.xml的代码