当前位置: 首页 > 编程笔记 >

Hadoop 1和Hadoop 2之间的区别

金和雅
2023-03-14
本文向大家介绍Hadoop 1和Hadoop 2之间的区别,包括了Hadoop 1和Hadoop 2之间的区别的使用技巧和注意事项,需要的朋友参考一下

我们知道,为了维护大数据并以不同的方式从此数据获取相应的报告,我们使用了Hadoop,它是Apache Software Foundation基于Java编程语言的开源框架。

现在,Apache引入了名为Hadoop 2的下一个Hadoop版本,因此本文着重介绍这两个版本之间的差异。

以下是Hadoop 1和Hadoop 2之间的主要区别。

序号 Hadoop 1 Hadoop 2
1 新组件和API 正如Hadoop 1在Hadoop 2之前引入的那样,与Hadoop 2相比,它具有更少的组件和API。 另一方面,在Hadoop 1之后引入的Hadoop 2与Hadoop 1相比具有更多的组件和API,例如YARN API,YARN FRAMEWORK和增强的Resource Manager。
2 支持 Hadoop 1在其体系结构中仅支持MapReduce处理模型,不支持非MapReduce工具。 另一方面,Hadoop 2允许在MapReducer模型以及其他分布式计算模型(例如Spark,Hama,Giraph,消息传递接口)MPI和HBase协处理器中工作。
3 资源管理 Hadoop 1中的Map reducer负责处理和集群资源管理。 另一方面,在使用Hadoop 2进行群集资源管理的情况下,使用YARN进行处理管理是使用不同的处理模型完成的。
4 可扩展性 由于Hadoop 1早于Hadoop 2,因此可伸缩性比Hadoop 2相对要小,并且在节点扩展的情况下,每个集群最多只能有4000个节点 另一方面,Hadoop 2具有比Hadoop 1更好的可伸缩性,并且每个群集最多可伸缩10000个节点。
5 实作 Hadoop 1的实现遵循插槽的概念,插槽仅可用于运行Map任务或Reduce任务。 另一方面,Hadoop 2遵循了可用于运行一般任务的容器的概念。
6 Windows支持 最初,在Hadoop 1中,Apache不提供对Microsoft Windows的支持。 另一方面,随着Hadoop版本的改进,Apache为Hadoop 2中的Microsoft Windows提供了支持。
 类似资料:
  • 问题内容: 我错放了太多次了,我想我一直忘记,因为我不知道两者之间的区别,只是一个给了我我期望的价值,而另一个却没有。 为什么是这样? 问题答案: 是的简写形式(尽管请注意,该表达式只会被计算一次。) 是的,即指定一元的到。 例子:

  • 问题内容: 因此,我有一段简单的代码可以打印出整数1-10: 然后,如果仅在第3行上更改一个运算符,它将打印出无限数量的1整数(我知道为什么会这样做)。为什么在运行第二个程序时没有出现语法错误?如果赋值运算符后面跟着一个加法运算符,它不会调用语法错误吗? 问题答案: 与相同, 只是意味着。

  • 问题内容: 有人可以解释一下 和 我不知道“确切”的含义 问题答案: 在这个例子中,什么都没有。当您具有多个具有相似名称的路径时,该参数将起作用: 例如,假设我们有一个显示用户列表的组件。我们还有一个用于创建用户的组件。的网址应嵌套在下。因此,我们的设置可能如下所示: 现在,这里的问题是,当我们转到路由器时,将通过所有定义的路由,并返回它找到的第一个匹配项。因此,在这种情况下,它将首先找到路线,然

  • 问题内容: 我很好奇printStackTrace()和toString()之间的区别是什么。乍一看,他们 似乎 做的完全相同。 码: 问题答案: 不,有重要区别!使用toString,您只有异常的类型和错误消息。使用printStackTrace()可以获得异常的整个堆栈跟踪,这对于调试非常有帮助。 System.out.println(toString())的示例: printStackTra

  • 问题内容: 我看不到两种方式之间的任何区别,@ Qualifier 始终与 @Autowired一起使用 。 VS 有人能让我知道其中的区别吗?谢谢! 问题答案: 可以单独使用。如果单独使用,将按类型进行接线。因此,如果在容器中声明了多个相同类型的bean,而又不知道要注入哪个bean,就会出现问题。结果,通过指定Bean名称(按名称进行绑定),与一起使用来阐明要实际连接的Bean 也按名称接线。

  • 问题内容: System.getenv()和System.getProperty()有什么区别? 当我们使用Processbuilder运行任何命令时,我们可以设置环境变量,即: 如果在此方法之前使用System.setProperties()设置了一些属性,则该属性可用于由ProcessBuilder启动的此过程吗? 问题答案: 获取 环境变量 。获取Java属性。环境变量是在OS级别指定的。通

  • 问题内容: 和以下代码之间有什么区别: 和 他们是同义词吗?在某些情况下,一个比另一个更可取吗?使用这两种方法时该做什么和不该做什么? 问题答案: Class.forName()将始终使用调用者的ClassLoader,而ClassLoader.loadClass()可以指定其他ClassLoader。我相信Class.forName也会初始化加载的类,而ClassLoader.loadClass