为什么我在Spring Data Mongo中得到聚合异常，而在Mongo shell中没有？

Question

我有一个在MongoDB Shell中工作的查询，但是当我增加要返回的文档数量时，它使用Spring Data MongoDB抛出聚合结果超过最大文档大小（16MB）异常。

以下是返回无误的shell查询：

db.myCollection.aggregate([{"$skip":0},{"$limit":10000},{"$match":{"_id"="550b2552e4b03562d6329a39"}}], {"allowDiskUse":true})

以下是Spring数据片段：

List<AggregrationOperation> ops = new ArrayList<AggregationOperation>();
ops.add(new SkipOperation(0));
ops.add(new LimitOperation(10000));
ops.add(new MatchOperation(Criteria.where("_id").is("550b2552e4b03562d6329a39")));

TypeAggregation<MyCollection> aggregation = Aggregation.newAggregation(MyCollection.class, ops).withOptions(Aggregation.newAggregationOptions().allowDiskUse(true).build());

AggregationResults<MyCollection> result = mongoTemplate.aggregate(aggregation, MyCollection.class);
List<MyCollection> myResults = result.getMappedResults()

当我限制在100或1000条记录时，一切正常。当我增加到10000时，会出现“聚合结果超过最大文档大小（16MB）”异常。

以下是我使用的版本供参考：

MongoDB = 3.0.0
Mongo Java Driver = 2.13.0
Spring Data MongoDB = 1.6.0
Spring Data Commons = 1.9.0

更新：

背景：我使用聚合解决方案是因为我在使用find（）时超过了32MB的排序限制。我知道添加索引可以解决这个问题。不幸的是，此解决方案无法扩展。我想对列表网格中的所有列进行排序，这意味着需要索引10列。当然，在UI中，我可以将排序限制为特定列，但我再次尝试避免这种解决方案，这也是我尝试聚合的原因。

看来使用光标是我唯一的解决办法。有人能确认Spring Data MongoDB不提供直接游标支持吗？这意味着我必须使用MongoDB的应用编程接口？

Answer 1

默认情况下，您可以使用outputMode（AggregationOptions.outputMode.CURSOR）作为输出选项，而不是有限的16MB文档。请参阅聚合游标用法。

Aggregation.newAggregationOptions().outputMode(AggregationOptions.OutputMode.CURSOR).allowDiskUse(true).build()

Answer 2

我使用RoboMongo（mongo客户端）也有同样的问题。尝试使用db.run命令（）而不是。

在某些客户机上使用聚合方法似乎会向查询中添加一些数据，而allowDiskUse将被忽略。

当我使用ranCommand时，它工作得很好：

db.runCommand(
   { aggregate: "collection_name",
     pipeline: [
            {$group: ...}, 
            {$match: ...},
            {$group: ...}
           ],
     allowDiskUse: true
   }