重组elasticsearch索引以允许对值之和进行筛选

Question

我有一个产品索引。

每个产品都有几个变种（可以是几个或几百个，每个都有一个颜色和大小，例如红色）

每一个变体，都可以在几个仓库（aronud 100个仓库）（在一定数量）。

仓库有AB、XY、CD等代码。

如果我可以选择，我会将其索引为：

stock: {
  Red: {
    S: { AB: 100, XY: 200, CD: 20 },
    M: { AB: 0, XY: 500, CD: 20 },
    2XL: { AB: 5, XY: 0, CD: 9 }
  },
  Blue: { 
    ...
  }
}

以下是我可能收到的一种客户查询：

给我看所有的产品，有红色。S颜色的库存（至少100）在仓库AB和XY。

所以这可能是一个过滤器

Red.S.AB > 100 AND Red.S.XY > 100

我不是在这里编写完整的filter查询，而是简单的弹性查询。

问题是，给定100个仓库，100个大小，25种颜色，这很容易需要100*100*25=250K映射。Elasticsearch根本无法处理这么多的键。

简单的答案是使用嵌套文档，但是嵌套文档带来了一个特殊的问题。我们不能在给定的嵌套文档中求和，嵌套文档速度很慢，特别是当我们每个产品有250K的时候。

我对外部解决方案的开放程度也比弹性好。我们是Rails/Postgres堆栈。

Answer 1

你有你的产品索引与变体，这很好，但我会使用另一个索引来管理任何与多仓库库存相关的东西。每个产品/尺寸/颜色/仓库都有一个文档和相关的计数。例如：

{
  "product": 123,
  "color": "Red",
  "size": "S",
  "warehouse": "AB",
  "quantity": 100
}

{
  "product": 123,
  "color": "Red",
  "size": "S",
  "warehouse": "XY",
  "quantity": 200
}

{
  "product": 123,
  "color": "Red",
  "size": "S",
  "warehouse": "CD",
  "quantity": 20
}
etc...

这样，您对股票的查询将更加灵活，因为您只需要在字段(产品、颜色、大小、仓库)上进行筛选，并简单地对数量字段、总和、平均值或您可能想到的任何东西进行聚合。

您可能需要利用bucket_script管道聚合来决定总和是高于还是低于所需的阈值。

通过简单地为任何给定组合编制新数量索引来维护库存变动也比每次商品出库时更新主产品文档要容易得多。

无需脚本，无需嵌套文档。