当前位置: 首页 > 知识库问答 >
问题:

Q HPX与“apache云计算”(例如与Spark)如何公平?

元景天
2023-03-14

我一直在看HPX(https://github.com/STEllAR-GROUP/hpx)作为使应用程序更具可扩展性的潜在机制。

我认为HPX主要针对(并因此而优化)HPC社区,这些社区通常有节点集群,其中包含许多代码,节点之间具有快速互连。parallelX模型不需要这样做,但由于节点之间传递数据的成本较高,您的性能当然会下降。

另一方面,我们有一套Java框架,包括hadoop、spark

那么,如果您在两者之间进行选择(忽略C与Java flamewars)

如果纯粹从性能角度考虑,它们在管理费用方面的比较如何?

当然,这在很大程度上取决于你试图解决的问题类型。我想更好地理解权衡。

共有1个答案

花阳秋
2023-03-14

目前,HPX尚未被使用或适应云类型场景。我们曾想过对其进行调整,但尚未实施任何措施。但这是可能的(原则上,正如你所指出的那样)。

 类似资料:
  • 本文主要讨论 Apache Spark 的设计与实现,重点关注其设计思想、运行原理、实现架构及性能调优,附带讨论与 Hadoop MapReduce 在设计与实现上的区别。不喜欢将该文档称之为“源码分析”,因为本文的主要目的不是去解读实现代码,而是尽量有逻辑地,从设计与实现原理的角度,来理解 job 从产生到执行完成的整个过程,进而去理解整个系统。 讨论系统的设计与实现有很多方法,本文选择 问题驱

  • Docker 目前已经得到了众多公有云平台的支持,并成为除虚拟机之外的核心云业务。 除了 AWS、Google、Azure、Docker 官方云服务等,国内的各大公有云厂商,基本上都同时支持了虚拟机服务和容器服务,甚至还专门推出了容器云业务。

  • 1.1 什么是云计算 虚拟化是基础(计算、存储、网络) 产品服务化(Iaas、Paas、Saas、...Xaas) 弹性伸缩,没有边界 1.2 云计算分类 共有云(AWS、阿里云、Azure) 私有云(Vmvare) 混合云(Azure、Rackspace) 1.2.1 共有云 云服务提供商对基础设计维护 多租户 Pay For Use 1.2.2 私有云 自己维护云基础设施 单租户或狭义上的多租

  • 如果有一个单元格带有公式并保存文件,那么在手动关闭文件后,excel将被要求保存更改?如何从程序中完全保存文件,因为如果不保存,我无法通过读取文件获得正确的值。 当前文件保存: 公式更新: 公式: 文件读取: 单元格值:-20000000,-10002399000 程序公式单元格值:0,文件公式单元格值:-0653687014

  • 我是新来的Laravel,我需要通过分组来计算值,例如,我有这些值 我需要计算列中有多少个1,我希望结果是男性:3,女性:2 我试过这种方法,但效果不理想

  • 我有一个rdd(String,Int),它是按键排序的 现在,我想用零开始第一个键的值,并将后续键作为前一个键的和。 例如:c1=0,c2=c1的值,c3=(c1值c2值),c4=(c1..c3值)预期输出: 有可能做到这一点吗?我用地图试过了,但总和没有保存在地图里。