使用TCPIP在多节点docker环境中进行Hazelcast

Question

我目前正在努力解决以下问题：

我有一个Java EE应用程序，它应该能够在集群中运行（实际上是这样）。对于节点之间的数据交换，我使用Hazelcast 3.3.3。因为我们的客户害怕UDP，所以我们使用TCP。因此，我为每个节点配置了3个hazelcast参数：要使用的网络接口、端口和集群成员。在现实生活中（不是docker环境），一切都正常。现在，我想将Java EE服务器放入docker容器中（每个节点一个），并通过Hazelcast将它们链接起来。

我所做的是：

在运行docker容器的主机上，我创建了几个虚拟网络接口（172.21.0.X）。对于每个docker容器，我给出了网络映射，如-p 172.21.0。十： 5190:5190（5190是我用于Hazelcast的端口）

在容器中的Java EE应用程序中，我将hazelcast配置为侦听接口172.21.0。十、 端口5190成员172.21.0。十： 5190，。。。。。。现在的问题是：docker将为每个共有者分配一个内部IP号码。事先我不能确定docker将分配哪个IP号码。它肯定不是我想要使用的IP（172.21.0.X）。Hazelcast启动并告诉我：没有找到匹配的接口。当然不是。Hazelcast将检查docker容器的IP接口，类似于172.4。XX。这不符合我给hazelcast的配置（使用172.21.X.X）。

到目前为止，似乎无法指定docker容器的内部IP号。我可以从正在运行的容器中查询它，但为时已晚，因为我需要在启动容器之前配置JavaEE服务器。

有什么提示吗？是否可以使用TCPIP运行Hazelcast？

Answer 1

我想更新@gremwell的答案，因为现在它不太正确。属性hazelcast.local.local地址不再有效。相反，应该把这个片段放在hazelcast.xml

   <network>
        <public-address>${hazelcast.ip}:${hazelcast.port}</public-address>
        <port auto-increment="false" port-count="100">${hazelcast.port}</port>
        ...
   </network>

然后在启动docker容器时传递参数（我使用正式的hazelcast映像和mount文件夹，配置使用-v标志）

sudo docker run -p 5701:5701 -e JAVA_OPTS="-Dhazelcast.config=/etc/conf/hazelcast.xml -Dhazelcast.ip=`ip route get 8.8.8.8 | awk '{print $NF; exit}'` -Dhazelcast.port=5701" -v /data/docker/hazelcast:/etc/conf -ti hazelcast/hazelcast

命令hazelcast.ip=ip路由获取8.8.8.8|awk'{print$NF；出口}'获取主机ip并将其作为hazelcast.ip变量传递到配置文件中。内部端口和docker端口映射应该在3个地方类似于5701。下一个容器运行5702，依此类推。

希望这有帮助。

Answer 2

此线程提供了答案和示例：https://groups.google.com/d/msg/orient-database/ehfKcInWZXs/wxs8xLUOGB8J

基本上，在hazelcast文件中使用hazelcast变量，即。

<property name="hazelcast.local.localAddress">${hazelcast.ip}</property>

然后，当您运行包含的docker时，您会添加：

-e IP=`ip route | awk '/default/ { print  $9 }'`

它在docker容器中设置环境变量。然后在那里你可以这样做：

CMD ["java", "-Dhazelcast.ip=${IP}", ...

因此，它采用docker env变量，并将其作为定义粉碎到java中，然后Hazelcast在运行时将其挑选出来并替换到它的配置文件中。