当前位置: 首页 > 知识库问答 >
问题:

Hadoop-设置单节点集群的问题

马华茂
2023-03-14

这些是我机器里的端口。tcp 0 0 0.0.0.0:8088 0.0.0.0:*侦听1001 50434 5765/Java
tcp 0 0 0.0.0.0:*侦听1001 45587 5461/Java
tcp 0 0 0.0.0.0:*侦听1001 45594 5461/Java
tcp 0 0 0.0.0.0:*侦听1001 47365 5765/Java
tcp 0 0 0.0.0.0:*侦听1001 47353 5765/Java
tcp 0 0 0.0.0.0:8032 0.0.0.0:*侦听1001 47353 5765/Java
0 0 0.0.0.0:50090 0.0.0.0:*侦听1001 46221 5610/Java

这是链接中的列表。

hduser@laptop:~$netstat-plten grep java(不是所有的进程都可以识别,非所有的进程信息不会显示,您必须是root用户才能看到全部。)tcp 0 0 0.0.0.0:*侦听1001 1843372 10605/Java
tcp 0 0 127.0.0.1:543100.0.0:*侦听1001 1841277 10447/Java
tcp 0 0 0.0.0.0:50090 0.0.0.0:*侦听1001 1841130 10895/Java
tcp 0 0 0.0.0.0:*侦听1001 1840196 10447/Java
tcp 0 0 0.0.0.0:50010 0.0.0.0:*侦听1001 1841320 10605/Java
tcp 0 0 0.0.0.0:50075 0.0.0.0:*侦听1001 1841320 10605/Java
0 0:::8031::*侦听1001 1842005 11252/Java
tcp6 0 0::::8032::*侦听1001 1842100 11252/Java
tcp6 0 0::::8033::*侦听1001 1842162 11252/Java

很少重要的东西,我错过的是50070,它是用于web门户。

共有1个答案

衡泰
2023-03-14

您可以使用jps命令检查哪些Hadoop进程正在运行。

这将向您显示进程名称,如NameNode、ResourceManager等,前面是它们的进程ID。例如:

7413 Jps
38754 ResourceManager
37054 NameNode
37338 SecondaryNameNode

这将告诉您Namenode和资源管理器是活动的。然后可以使用netstat检查这些进程正在使用哪些端口。例如:

netstat -lnptu |grep 37054
(Not all processes could be identified, non-owned process info
 will not be shown, you would have to be root to see it all.)
tcp        0      0 127.0.0.1:9000         0.0.0.0:*                   LISTEN      37054/java
tcp        0      0 127.0.0.1:50070        0.0.0.0:*                   LISTEN      37054/java
 类似资料:
  • 我正试图在hadoop中设置多节点集群,如何将0个数据阳极作为活动数据阳极,而我的hdfs显示了0个字节的分配 但是nodemanager后台进程正在datanodes上运行 `

  • 需要一些帮助。虽然有很多不同的答案可用,我也尝试了他们,但不能使它工作。我在mac os中本地插入了hadoop,当我尝试编译java程序时,我得到了以下错误。我知道问题出在设置正确的类路径上,但在五月的情况下,提供类路径并没有使其工作。我已经在/usr/local/cellar/hadoop/1.2.1/libexec下安装了hadoop lineindexer.java:6:包org.apac

  • 问题内容: 我尝试在Google Container Engine的群集节点上安装ElasticSearch(最新版本),但是ElasticSearch需要变量:>> 262144。 如果我ssh到每个节点并手动运行: 一切正常,但是任何新节点将没有指定的配置。 所以我的问题是: 有没有办法在引导时在每个节点上加载系统配置?Deamon Set并不是一个好的解决方案,因为在Docker容器中,系统

  • 根据如何在Ubuntu中安装Apache Hadoop2.6.0(多节点/集群设置),我将Hadoop2.6.0设置为1个主服务器和2个从服务器。毕竟,我在master和slaves上检查了jps,看起来都很好:master上的NameNode、SecondaryNameNode、ResourceManager;和DataNode,从服务器上的NodeManager。但是当我浏览到Hadoopma

  • Disque 以集群模式运行, 每个服务器都是集群中的一个节点, 用户可以运行任意数量的节点, 只要确保每个节点的端口号不同即可。 在默认情况下, 运行 Disque 服务器程序 disque-server 将启动一个端口号为 7711 的 Disque 节点: $ ./disque-server 528:C 28 Apr 11:50:08.519 # Warning: no config fil