当前位置: 首页 > 面试题库 >

请列出正常工作的hadoop集群中hadoop都需要启动哪些进程,他们的作用分别是什么?

齐望
2023-03-14
本文向大家介绍请列出正常工作的hadoop集群中hadoop都需要启动哪些进程,他们的作用分别是什么?相关面试题,主要包含被问及请列出正常工作的hadoop集群中hadoop都需要启动哪些进程,他们的作用分别是什么?时的应答技巧和注意事项,需要的朋友参考一下

--namenode =>HDFS的守护进程,负责维护整个文件系统,存储着整个文件系统的元数据信息,有image+edit log namenode不会持久化存储这些数据,而是在启动时重建这些数据。

--datanode =>是具体文件系统的工作节点,当我们需要某个数据,namenode告诉我们去哪里找,就直接和那个DataNode对应的服务器的后台进程进行通信,由DataNode进行数据的检索,然后进行具体的读/写操作

--secondarynamenode =>一个冗余的守护进程,相当于一个namenode的元数据的备份机制,定期的更新,和namenode进行通信,将namenode上的image和edits进行合并,可以作为namenode的备份使用

--resourcemanager =>是yarn平台的守护进程,负责所有资源的分配与调度,client的请求由此负责,监控nodemanager

--nodemanager => 是单个节点的资源管理,执行来自resourcemanager的具体任务和命令

 

 类似资料:
  • 本文向大家介绍display有哪些值?分别说明他们的作用是什么?相关面试题,主要包含被问及display有哪些值?分别说明他们的作用是什么?时的应答技巧和注意事项,需要的朋友参考一下 block none inline-block initial table inline flex 自己能打出来的只有这些

  • 本文向大家介绍 请列出hadoop的进程名称相关面试题,主要包含被问及 请列出hadoop的进程名称时的应答技巧和注意事项,需要的朋友参考一下 解答: 1.namenode:管理集群,并记录datanode文件信息。 2.Secondname:可以做冷备,对一定范围内的数据做快照性备份。 3.Datanode:存储数据。 4.Jobtracker:管理任务,并将任务分配给tasktracker。

  • 每当我启动Hadoop集群时,系统都会询问密码。 我已经在.ssh文件夹中添加了密钥。 开始-dfs.sh 19/01/22 20:38:56警告util.nativeCodeLoader:无法为您的平台加载本机Hadoop库...使用内置Java类(如果适用)在[localhost]xxxx@localhost's password上启动namenode:localhost:启动namenode

  • 本文向大家介绍请说明一下jsp有哪些动作? 这些动作的作用又分别是什么?相关面试题,主要包含被问及请说明一下jsp有哪些动作? 这些动作的作用又分别是什么?时的应答技巧和注意事项,需要的朋友参考一下 考察点:JSP   JSP 共有以下6种基本动作 jsp:include:在页面被请求的时候引入一个文件。 jsp:useBean:寻找或者实例化一个JavaBean。 jsp:setProperty

  • 我们已经在现有的HDP上安装了nifi(HDF服务)。安装是成功的,我可以运行nifi没有任何错误。但我在PutHDFS中遇到了一个问题 我也附上了截图。

  • 但现在我们希望使用keytab文件生成的票证过期 我是一个使用Kerberos的新手,任何指向正确方向的指针都会有很大的帮助。