通过Java/Spring Boot连接到Docker Elasticsearch实例

Question

我正在从Docker运行Elasticsearch实例。该图像来自jHipster docker hub repo:jHipster/jHipster elasticsearch/-我使用图像v1.3.2，因为我需要elasticsearch 2.4.0（与项目的Spring Boot版本一致）。

我正在启动ES容器以及Logstash和Kibana图像，使用docker compose。以下是启动ES容器的设置：

jhipster-elasticsearch:
    image: jhipster/jhipster-elasticsearch:v1.3.2
    ports:
        - 9400:9200
        - 9500:9300
    volumes:
       - ./log-es-config/elasticsearch_custom.yml:/usr/share/elasticsearch/config/elasticsearch.yml

所以我用9400做Rest，9500做交通通讯。

这是安装到ES配置的elasticsearch_custom.yml中的配置：

cluster.name: "log-cluster"
node.name: "log-node"
http.host: 0.0.0.0
transport.host: 127.0.0.1
transport.tcp.port: 9500
transport.publish_port: 9500

当我启动container时，这就是我从http://localhost:9400/_nodes：

"cluster_name": "log-cluster",
  "nodes": {
    "xLsGj2DyTdCF89I7sAToVw": {
      "name": "log-node",
      "transport_address": "127.0.0.1:9500",
      "host": "127.0.0.1",
      "ip": "127.0.0.1",
      "version": "2.4.0",
      "build": "ce9f0c7",
      "http_address": "172.18.0.5:9200",
      "settings": {
        "cluster": {
          "name": "log-cluster"
        },
        ... (I can put all response if needed)

JAVA API：

现在，我尝试像这样连接到此ES节点：

    @Bean
    public ElasticsearchOperations logsElasticsearchOperations() throws UnknownHostException {
        Settings settings = Settings.settingsBuilder()
            .put("cluster.name", "log-cluster")
            .put("node.name", "log-node")
            .build();

        Client client = TransportClient.builder()
            .settings(settings)
            .build()
            .addTransportAddress(new InetSocketTransportAddress(new InetSocketAddress("127.0.0.1", 9500)));


        ElasticsearchTemplate template = new ElasticsearchTemplate(client);
        template.createIndex(ProcessLog.class);
        log.debug("Elasticsearch for logs configured.");
        return template;
    }

我得到的错误是最著名的一个：

原因：org.elasticsearch.client.transport.NoNodeAvailableException:配置的节点均不可用：[{{transport}-1}{127.0.0.1}{127.0.0.1:9500}]

我在谷歌上搜索并尝试了不同的配置方法，也将client.transport.sniff设置为false，但这些方法都不起作用。现在我花了很多时间试图配置这个，但我仍然缺少一些东西。

提前谢谢你的帮助。

更新：

当我启动应用程序时，还有一个嵌入式ES实例正在运行。因此，主机端口配置如下所示：

• 嵌入式ES： 9200（超文本传输协议），9300（tcp）
• Docker的ES： 9400（超文本传输协议），9500（tcp）

这里是完整的docker-compose.yml：

    version: '2'
    services:
    jhipster-elasticsearch:
        # elasticsearch 2.4.0 - to be in line with spring boot version
        image: jhipster/jhipster-elasticsearch:v1.3.2
        ports:
            - 9400:9200
            - 9500:9300
        volumes:
           - ./log-es-config/elasticsearch_custom.yml:/usr/share/elasticsearch/config/elasticsearch.yml
    jhipster-logstash:
        image: jhipster/jhipster-logstash:v2.2.1
        command: logstash -f /conf/logstash_custom.conf
        ports:
            - 5000:5000/udp
            - 6000:6000/tcp
        volumes:
            - ./logstash-log-es-conf/:/conf
    jhipster-console:
        image: jhipster/jhipster-console:v2.0.1
        ports:
            - 5601:5601
    jhipster-zipkin:
        image: jhipster/jhipster-zipkin:v2.0.1
        ports:
            - 9411:9411
        environment:
            - ES_HOSTS=http://jhipster-elasticsearch:9400
            - ZIPKIN_UI_LOGS_URL=http://localhost:5601/app/kibana#/dashboard/logs-dashboard?_g=(refreshInterval:(display:Off,pause:!f,value:0),time:(from:now-1h,mode:quick,to:now))&_a=(filters:!(),options:(darkTheme:!f),panels:!((col:1,id:logs-levels,panelIndex:2,row:1,size_x:6,size_y:3,type:visualization),(col:7,columns:!(stack_trace),id:Stacktraces,panelIndex:7,row:1,size_x:4,size_y:3,sort:!('@timestamp',desc),type:search),(col:11,id:Log-forwarding-instructions,panelIndex:8,row:1,size_x:2,size_y:3,type:visualization),(col:1,columns:!(app_name,level,message),id:All-logs,panelIndex:9,row:4,size_x:12,size_y:7,sort:!('@timestamp',asc),type:search)),query:(query_string:(analyze_wildcard:!t,query:'{traceId}')),title:logs-dashboard,uiState:())

Answer 1

我建议后退一步，安装HeadPlugin（https://github.com/mobz/elasticsearch-head），这样您就可以查看您的集群，它将显示集群名称的详细信息。

还可以尝试从命令行发送一个简单的索引请求，以确保可以连接到集群。

Answer 2

从docker compose文件中，主机上的端口9500映射到容器内的端口9300，即：

ports:
    - 9500:9300

因此，由于端口9500是Docker容器之外的TCP端口，在您的elasticsearch_custom.yml配置文件中，您应该使用此选项

transport.tcp.port: 9300
transport.publish_port: 9300

或者干脆不使用这两行，因为9300是默认的TCP端口。

Answer 3

我通过将transport.host定义为0.0.0.0insideelasticsearch\u custom.yml，使实例绑定到容器的ip，从而实现了这一点。

也许这也是项目github repo上elasticsearch.yml的默认设置。