Storm之间的通信。亚马尔的主管。插槽。端口和配置。setNumWorkers（#workers）方法调用

Question

其他暴风用户：

建立Storm群的指南(https://github.com/nathanmarz/storm/wiki/Setting-up-a-Storm-cluster)指示主管。插槽。端口配置属性的设置应确保为机器上的每个工作进程分配一个单独的端口。

我的理解是，每个worker都是一个JVM实例，用于侦听来自nimbus控制器的命令。。因此，每个人都在一个单独的端口上监听是有道理的。

然而，在backtype上也有一个方法。暴风雨Config，它似乎允许定义工作人员的数量。如果对setNumWorkers的调用试图设置的工作线程数超过您为其配置的端口数，该怎么办？这似乎会把事情搞砸。

对我来说唯一有意义的是yaml配置定义了工人数量的上限。。每个拓扑可能会要求为其分配一些工作人员。但是，如果我提交了两个拓扑（到某个特定集群），每个拓扑都进行了调用配置。setNumWorkers（2），那么我最好配置四个端口。

这是正确的想法吗？

提前谢谢-克里斯

Answer 1

监督人插槽。港口是整个Storm群工人数量的硬限制。

和

Config.set数字工人（#工人）是工人数量拓扑的软限制。

这意味着Config.set数字工人（#工人）

假设我们总共有8个端口。拓扑将工作人员数配置为6。它将获得8个端口中的6个，剩余的2个工作端口将不使用。

Answer 2

你基本上是对的。

槽和工人之间有一个重要的区别。槽是工人可以实现的地方。比如说，当你设置一个有10个插槽的主管时，你设置的是在该主管上同时运行多达10个工人。如果您请求的工作人员多于插槽，Storm将尽其所能在可用插槽中安排工作（在某些情况下，这意味着，例如，一个工作人员可能会进入插槽，做一些工作，然后被另一个工作人员替换，以便拓扑可以继续），在某些方面，与操作系统没有什么不同，操作系统将进程安排在有限数量的“插槽”（处理器/内核/超线程/任何可用的）上运行。

Answer 3

我认为上限猜测是正确的。我在我的笔记本电脑上设置了一个单机Storm集群，然后我构建了EquirmationPology（来自storm starter）。。我只设置了两名工人，但Prology引用了

但是，当我看到storm UI时，它告诉我'Num Workers'是2。

因此，您在storm.yaml文件中设置的似乎是一个上限，如果您要求的辅助角色比您配置的端口多，那么您只需要获得最大可用值。

（警告：我刚刚开始研究这方面的问题，而且我绝不是专家，所以我有可能错过了一些东西……但上面的报告就是我观察到的。）