CosmosDB查询日期范围索引

Question

我有一个大约为100GB的cosmos数据库。我成功地创建了一个漂亮的分区键，我在70M记录上有大约4600个分区，但是我仍然需要查询两个存储为字符串的日期时间字段，而不是纪元格式。

示例json：

"someField1": "UNKNOWN",
"someField2": "DATA",
"endDate": 7014541201,
"startDate": 7054864502,
"someField3": "0",
"someField3": "0",

我注意到当我做从tbl中选择*以及当我做从tbl中选择*其中start Date

此外，当我尝试在startDate和endDate上添加哈希索引时，他基本上会将其转换为两个索引。例子：

 "path": "/startDate/?",
        "indexes": [
            {
                "kind": "Hash",
                "dataType": "String",
                "precision": 3
            }
            ]
    }, 

这是转换为

"path": "/startDate/?",
        "indexes": [
            {
                "kind": "Range",
                "dataType": "Number",
                "precision": -1
            },
            {
                "kind": "Range",
                "dataType": "String",
                "precision": -1
            }
        ]

这是正常行为还是与我的数据有关？谢谢

我检查了查询指标，对于4k记录，对cosmosDB的查询在100ms内执行。我想问你，这是正常的行为吗

var option = new FeedOptions { PartitionKey = new PartitionKey(partitionKey),  MaxItemCount = -1};

var query= client.CreateDocumentQuery<MyModel>(collectionLink, option)
            .Where(tl => tl.StartDate >= DateTimeToUnixTimestamp(startDate) && tl.EndDate <= DateTimeToUnixTimestamp(endDate))
        .AsEnumerable().ToList();

这个查询在10-12秒内返回10k个结果（Postman大约9MB大小）？这个分区包含大约50k条记录。

检索的文档数：12,356
检索的文档大小：12,963,709字节
输出文档数：3,633
输出文档大小：3,819,608字节
索引利用率：29.00%
总查询执行时间：264.31毫秒

查询编译时间：0.12毫秒

逻辑计划构建时间：0.07毫秒

物理计划构建时间：0.06毫秒

查询优化时间：0.01毫秒

索引查找时间：51.10毫秒

文件加载时间：140.51毫秒

运行时执行时间

查询引擎时间：55.61毫秒

系统功能执行时间：0.00毫秒

自定义函数执行时间：0.00毫秒

文件写入时间：10.56毫秒

客户端指标

重试计数：0

        Request Charge                         :          904.73 RUs




Answer 1

我来自CosmosDB工程团队。

由于您的集合有7000万条记录，我假设观察到的延迟仅出现在结果的第一次往返（或第一页）上。注意，还可以通过调整FeedOptions来改善观察到的延迟。执行查询时，MaxDegreeOfParallelism为-1。

关于这两个查询本身之间的区别，请注意，没有过滤器的SELECT*是一个完整的扫描查询，与具有两个过滤器的另一个查询相比，它首先返回结果可能要快一点，它对所有分区的本地索引做了更多的工作，这可能解释了观察到的延迟。

关于你的另一个问题，我们不再支持新集合的哈希索引策略。请参见此处：https://docs.microsoft.com/en-us/azure/cosmos-db/index-types#index-善良。我们自动将哈希索引转换为全精度范围。

您还可以为查询获取QueryMetrics并分析结果以找出延迟的原因。详细信息如下：https://docs.microsoft.com/en-us/azure/cosmos-db/sql-api-query-metrics#query-execution-metrics