elasticsearch：在返回的文档中定义字段的顺序

Question

我正在向elasticsearch发送查询，它会响应其文档中字段的未知顺序。我如何修复elsasticsearch返回文档中字段的顺序？我的意思是，我正在发送这个查询：

{
"index": "my_index",
"_source":{
          "includes" : ["field1","field2","field3","field14"]
  },
"size": X,
"body": {
    "query": { 
        // stuff    
       }
    }
}

当它回应时，它给了我一些不正常的东西。我最后想将其转换为csv，并修复csv标题。有什么方法可以让我得到像doc1：{“field1”，“field2”，“field3”，“field14”}doc2：{“field1”，“field2”，“field3”，“field14”}。。。与我的“\u源”的顺序相同？

谢谢你的帮助。

Answer 1

Elasticsearch中的文档是JSON哈希/映射，根据定义，映射是无序的。

围绕这一点的一个解决方案是使用Logstash，以便使用elasticsearch输入从ES中提取文档，并使用CSV输出以CSV格式输出它们。这样可以保证CSV文件中的字段的顺序与指定的顺序完全相同。另一个好处是，您不必编写自己的样板代码来从ES和sink提取到CSV，Logstash可以免费为您完成这一切。

Logstash配置如下所示：

input {
  elasticsearch {
    hosts => "localhost"
    query => '{ "query": { "match_all": {} } }'
    size => 100
    index => "my_index"
  }
}
filter {}
output {
    csv {
        fields => ["field1","field2","field3","field14"]
        path => "/path/to/file.csv"
    }
}