如何在ElasticSearch聚合中包含所有文档并避免sum\u other\u doc\u count>0

Question

ES不是我工作的主流，有一个行为我无法纠正。我有一个相当简单的聚合查询：

GET /my_index/_search
{
  "size": 0,
  "query": {
    "bool": {
      "must": [
        {
          "match": {
            "request_type": "some_type"
          }
        },
        {
          "match": {
            "carrier_name.keyword": "some_carrier"
          }
        }
      ]
    }
  },
  "aggs": {
    "by_date": {
      "terms": {
        "field": "date",
        "order": {
          "_term": "asc"
        }
      },
      "aggs": {
        "carrier_total": {
          "sum": {
            "field": "total_count"
          }
        }
      }
    }
  }
}

我的理解来自https://www.elastic.co/guide/en/elasticsearch/reference/current/search-aggregations-bucket-terms-aggregation.html不是所有文档都包含在聚合中。实际上，根据查询部分的不同，我确实在结果中看到“sum\u other\u doc\u count”：值大于零。

我的问题是：有没有一种方法可以构建搜索，以便包含所有文档？文档的数量相当少，通常低于1k，

先谢谢你，鲁文

Answer 1

将术语agg的size从默认10增加到较大的数字：

...
    "by_date": {
      "terms": {
        "field": "date",
        "order": {
          "_term": "asc"
        },
        "size": 1000           <-----
      }
...

Answer 2

根据文件，

size默认为10

fromsize不能超过index.max_result_window索引设置，默认为10000。

在您的情况下，文档非常小，接近1k，因此1k结果可以轻松检索。

可以设置size参数来定义应该从整个术语列表中返回多少术语桶。默认情况下，协调搜索过程的节点将请求每个分片提供自己的顶级术语桶，一旦所有分片响应，它将将结果减少到最终列表，然后返回给客户端。

因此，要求在字段日期中包含前1000个文档。

...

"by_date": {
      "terms": {
        "field": "date",
        "order": {
          "_term": "asc"
        },
        "size": 1000   
}  

...

请求的大小越大，结果越准确，但计算最终结果的成本也越高

要了解更多信息，您可以参考此官方文件