如何在Elasticsearch中增强给定搜索词的特定文档？

Question

我需要你帮助我设计一个真实场景的索引。这可能是一个很长的问题，让我尽量简明扼要地解释一下。

我们正在构建一个基于Elasticsearch的搜索平台，为客户提供站点搜索体验，索引中的文档可以是这样的：

{ "Path":"http://www.foo.com/doc/abc/1", "Title":"Title 1", "Description":"The description of doc 1", ... }
{ "Path":"http://www.foo.com/doc/abc/2", "Title":"Title 2", "Description":"The description of doc 2", ... }
{ "Path":"http://www.foo.com/doc/abc/3", "Title":"Title 3", "Description":"The description of doc 3", ... }
...

对于每个查询，返回的命中文档默认按相关性排序，但我们的客户还希望为一些关键字提升一些特定文档，

它们为我们提供了以下内容，如增强配置XML：

<boost>
    <Keywords value="keyword1">
        <Path rank="10000">http://www.foo.com/doc/abc/1</Path>
    </Keywords>

    <Keywords value="keyword2">
        <Path rank="10000">http://www.foo.com/doc/abc/2</Path>
        <Path rank="9900">http://www.foo.com/doc/abc/1</Path>
    </Keywords>

    <Keywords value="keyword3">
        <Path rank="10000">http://www.foo.com/doc/abc/3</Path>
        <Path rank="9900">http://www.foo.com/doc/abc/2</Path>
        <Path rank="9800">http://www.foo.com/doc/abc/1</Path>
    </Keywords>
</boost>

也就是说，如果用户搜索“keyword1”，前1名命中的文档应该是路径字段值为“www.foo.com/doc/abc/1”的文档，而不管该文档的相关性分数如何。同样，如果搜索“keyword3”，前3名命中的文档应该是路径值分别为“www.foo.com/doc/abc/3”、“www.foo.com/doc/abc/2”和“www.foo.com/doc/abc/1”的文档。

为了满足这个特殊要求，我的设计是，首先将原始的提升XML反转为以下格式：

<boost>
    <Path value="http://www.foo.com/doc/abc/1">
        <keywords>
           <keyword value="keyword1" rank="10000" />
           <keyword value="keyword2" rank="9900" />
           <keyword value="keyword3" rank="9800" />
        </keywords>
    </Path>

    <Path value="http://www.foo.com/doc/abc/2">
        <keywords>
           <keyword value="keyword2" rank="10000" />
           <keyword value="keyword3" rank=9900" />
        </keywords>
    </Path> 
    <Path value="http://www.foo.com/doc/abc/3">
        <keywords>
           <keyword value="keyword3" rank="10000" />
        </keywords>
    </Path>
</boost>   

然后将包含关键字/排名字段数组的嵌套字段“Boost”添加到Elasticsearch文档中，如下示例：

{
  "Boost": [ 
     { "keyword":"keyword1", "rank": 10000},
     { "keyword":"keyword2", "rank": 9900},
     { "keyword":"keyword3", "rank": 9800}
  ] 
  "Path":"http://www.foo.com/doc/abc/1", 
  "Title":"Title 1", 
  "Description":"The description of doc 1",
   ...
 }

{
    "Boost": [ 
       { "keyword":"keyword2", "rank": 10000},
       { "keyword":"keyword3", "rank": 9900}
    ] 
    "Path":"http://www.foo.com/doc/abc/2", 
    "Title":"Title 2", 
    "Description":"The description of doc 2",
     ...
 }

{

    "Boost": [ 
       { "keyword":"keyword3", "rank": 10000}
    ] 
    "Path":"http://www.foo.com/doc/abc/3", 
    "Title":"Title 3", 
    "Description":"The description of doc 3",
     ...
}

然后在查询时，使用嵌套查询获得给定搜索关键字的每个匹配文档的排名值，然后使用评分脚本根据该排名值调整相关性评分。

由于提升XML的排名值远大于正常的相关性分数（通常小于5），因此在提升XML中为给定关键字配置的文档的调整分数应该是最高分。

你认为它在Elasticsearch上是一个好的设计吗？有更好的方法的建议吗？

提前感谢！

Answer 1

最好将关键字与原始文档索引在一个单独的字段中，然后在搜索期间，只需增强该字段中的匹配。

这并不完全是您所描述的，因为它不能很好地控制每个关键字的提升因子。但如果查询包含特定关键字，这绝对是一种使特定文档在搜索结果中显示得更高的方法。

如果您确实需要更好地控制不同关键字的提升因子，您仍然可以使用此方法来实现这一点。但您需要创建几个“增强的关键字”字段，并在查询中以不同的方式增强它们。

例如：

{ "Path":"http://www.foo.com/doc/abc/1",
  "Title":"Title 1",
  "Description":"The description of doc 1",
  "boost_kw1": "keyword1 keyword2",
  "boost_kw2": "keyword3 keyword4" },
{ "Path":"http://www.foo.com/doc/abc/1",
  "Title":"Title 1",
  "Description":"The description of doc 1",
  "boost_kw1": "keyword3",
  "boost_kw2": "keyword1 keyword2" }

在查询中，将总分计算为以下各项的总和：

• 主查询scire