ElasticSearch通过数组字段作为独占搜索进行搜索

Question

我确实在ElasticSearch中的字段中有一个数组数据，其中有一个关键字类型。我想用我想搜索的独占值搜索这个数组，即排除不包括在我的搜索关键字中的数组值。请看下面的细节。

谢了！

我有以下弹性搜索索引映射：

"exgroups": {
  "type": "keyword",
  "eager_global_ordinals": true
},

使用以下示例数据：

"id": 1,
"exgroups": ["TSX"]

"id": 2,
"exgroups": ["TSX", "OTC", "NSD"]

我的搜索是这样的：

{
  "bool" : {
    "filter" : {

        "term" : {
          "exgroups" : {
            "value" : "TSX"
          }
        }

    }
  }
}

我用过MatchQueryBuilder、TermQueryBuilder、TermsQueryBuilder都没用。根据ElasticSearch TermQuery定义，它应该能做到这一点。https://www.elastic.co/guide/en/elasticsearch/reference/6.2/query-dsl-term-query.html。但它没有，可能是因为字段是一个数组。

通常，term*query的行为如下：

iterate all the documents, for each document
  check if the exgroups contains 'tsx'
  if it does, return the document

这将返回文档1和2，因为文档2也包含TSX。但是，我希望它只返回文档1，而不返回数组中的其他文档。

我如何完成这件事？

提前谢了。

Answer 1

我最近在ElasticSearch中找到了以下文档:https://www.elastic.co/guide/en/elasticsearch/guide/current/_finding_multiple_exact_values.html

TermQuery和TermsQuery或ElasticSearch通常使用“must contain”而不是“must equals to”，因为它的索引是倒排的。

他们认为，可能的最佳解决办法是：

如果您确实想要这种行为--整个字段相等--实现它的最佳方法包括索引一个次要字段。在此字段中，索引字段包含的值数。利用我们以前的两份文件。一旦索引了计数信息，就可以构造一个constant_score来执行适当数量的术语。https://www.elastic.co/guide/en/elasticsearch/guide/current/_finding_multiple_exact_values.html#_equals_actical

以下步骤：

1. 在名为exgroups_count的索引中添加其他映射。
2. 使用logstash计算exgroups数组长度并放入exgroups_count字段。
3. 保存索引。

添加和重新索引整个东西有一些限制。一旦索引增长，向索引添加字段和计算计数将是非常麻烦的--这使得操作非常密集--更不用说您必须保存和维护映射了。

我找到了一个不需要重新索引的解决方案。看看ScriptQueryBuilder，理论上我可以添加一个脚本过滤器，它计算数组的长度并等于1。

"filter" : {
    "script" : {
        "script" : "doc['exgroups'].values.length == 1"
    }
}

因此，完整的查询现在如下所示：

"bool" : {
  "must" : [
    {
      "term" : {
        "exgroups" : {
          "value" : "TSX",
          "boost" : 1.0
        }
      }
    }
  ],
  "filter" : [
    {
      "script" : {
        "script" : {
          "source" : "doc['exgroups'].values.length == 1",
          "lang" : "painless"
        },
        "boost" : 1.0
      }
    }
  ],
  "adjust_pure_negative" : true,
  "boost" : 1.0
}

在Java中，

BoolQueryBuilder qBool = new BoolQueryBuilder();
TermQueryBuilder query = new TermQueryBuilder("exgroups", exchangeGroup.getCode());

qBool.must(query);

ScriptQueryBuilder sQuery = new ScriptQueryBuilder(new Script("doc['exgroups'].values.length == 1"));

qBool.filter(sQuery);