当前位置: 首页 > 编程笔记 >

MongoDB如何查询耗时记录的方法详解

法弘壮
2023-03-14
本文向大家介绍MongoDB如何查询耗时记录的方法详解,包括了MongoDB如何查询耗时记录的方法详解的使用技巧和注意事项,需要的朋友参考一下

准备

在此之前,我们先在我们的数据库中插入10万条数据。数据的格式是这样的:

{
 "name":"your name",
 "age":22,
 "gender":"male",
 "grade":2
}

explain

explain方法是用来查看db.collecion.find()的一些查询信息的。例如:

db.collectionName.find().explain()

explain方法有个可选的参数verbose,是个字符串,他表示的是verbose的模式。一共分为3种模式:

queryPlanner:默认参数,详细说明查询优化器选择的计划并列出被拒绝的计划。例如:

db.students.find({grade:1}).explain()

executionStats:MongoDB运行查询优化器选择获胜的计划,执行计划,完成并返回成功,统计描述的胜利计划的执行。例如:

db.students.find({grade:1}).explain("executionStats")


allPlansExecution:MongoDB返回描述获奖计划的执行以及对其他候选人统计计划选择方案时捕获的统计。
我们的目的是要记录执行find方法的耗时时间,所以用executionStats模式就可以了。

返回的结果也是只关注executionStats就可以了,如下图:


  1. nReturned:表示该查询条件下返回的文档数量。
  2. executionTimeMills:表示执行时间,单位毫秒
  3. totalDocsExamined:表示该集合总共文档数。

其他的属性在这里就不多说了,记录耗时我们只取executionTimeMills.

Profiling

上面提到的方法好像是只适用find方法,对于一些聚合查询之类的查询方法就无法统计耗时时间了。这里再介绍一个profiling方法记录查询耗时时间。

开启 Profiling 功能

有两种方式可以控制 Profiling 的开关和级别,第一种是直接在启动参数里直接进行设置。

  • 启动MongoDB时加上–profile=级别 即可。
  • 也可以在客户端调用db.setProfilingLevel(级别)命令来实时配置。可以通过db.getProfilingLevel()命令来获取当前的Profile级别。

例如:

db.setProfilingLevel(2)
db.getProfilingLevel()

Profiling一共分为3个级别:

  • 0 - 不开启。
  • 1 - 记录慢命令 (默认为>100ms)
  • 3 - 记录所有命令

Profile 记录在级别1时会记录慢命令,那么这个慢的定义是什么?上面我们说到其默认为100ms,当然有默认就有设置,其设置方法和级别一样有两种,一种是通过添 加–slowms启动参数配置。第二种是调用db.setProfilingLevel时加上第二个参数:

db.setProfilingLevel( level , slowms)
db.setProfilingLevel( 1 , 10 );

查询 Profiling 记录

开启profiling功能后,系统会把相关命令详细信息记录到当前数据库的system.profile集合里。查询方法也是跟普通的集合查询一样。

db.system.profile.find()

其中,mills就是命令耗时记录。

由于我们设置的级别是2,所以所有命令都有记录,现在我们把他改为级别1,且只记录耗时20毫秒以上的记录:

 db.setProfilingLevel( 1 , 20)

然后我们再执行一下聚合查询,查看下耗时时间:

db.students.aggregate( {$group:{_id:"$grade",avgAge:{$avg:"$age"}}} )

db.system.profile.find().pretty()


可以看出,我们的这聚合查询耗时70毫秒。

profile 部分字段解释

  • op:操作类型
  • ns:被查的集合
  • commond:命令的内容
  • docsExamined:扫描文档数
  • nreturned:返回记录数
  • millis:耗时时间,单位毫秒
  • ts:命令执行时间
  • responseLength:返回内容长度

下面介绍几个常用的查询命令:

列出执行时间长于某一限度(例如:20ms)的 Profile 记录.

db.system.profile.find({millis:{$gt:50}})

查看最新的 3条Profile 记录:

db.system.profile.find().sort({$natural:-1}).limit(3)

查看关于某个collection的相关慢查询操作:

db.system.profile.find({ns:'mydb.students'})

MongoDB 查询优化

  docsExamined(扫描的记录数)远大于nreturned(返回结果的记录数)的话,那么我们就要考虑通过加索引来优化记录定位了。

  responseLength 如果过大,那么说明我们返回的结果集太大了,这时请查看find函数的第二个参数是否只写上了你需要的属性名。(类似 于MySQL中不要总是select)

  对于创建索引的建议是:如果很少读,那么尽量不要添加索引,因为索引越多,写操作会越慢。如果读量很大,那么创建索引还是比较划算的。

Profiler 的效率

  Profiling 功能肯定是会影响效率的,但是不太严重,原因是他使用的是system.profile 来记录,而system.profile 是一个capped collection 这种collection 在操作上有一些限制和特点,但是效率更高。

总结

以上就是这篇文章的全部内容了,希望本文的内容对大家的学习或者工作具有一定的参考学习价值,如果有疑问大家可以留言交流,谢谢大家对小牛知识库的支持。

 类似资料:
  • 如何获取从驱动程序发送到的确切查询(出于调试目的)。 在mysql中,通过将添加到DataSource来实现。 我正在编写一个聚合查询,在开始日期和结束日期之间有一个匹配的管道。日期是以普通java日期类的形式给出的。 而且它似乎没有根据日期过滤结果。它把一切都还给我。

  • 我试图在mongodb日志文件中只记录慢速查询(执行时间超过10秒)。 我在运行蒙戈作为 并将分析设置为 但是当跟踪日志文件时,它会打印所有的查询。我可以看到很多查询,它的运行时间为0ms。我还需要添加什么来只获得慢速查询吗?

  • 本文向大家介绍MongoDB的查询方法,包括了MongoDB的查询方法的使用技巧和注意事项,需要的朋友参考一下 代码: 以上面的测试数据为基础,进行下面的基本查询操作: 1、查询所有博客 2、查询所有博客的标题和内容(指定需要返回的键值) 注:1表示返回,0表示不返回。默认情况下,“_id”这个键总是被返回,即便是没有指定这个键 3、查询作者为“张三”的博客(=操作) 4、查询除了作者为“张三”的

  • 问题内容: 我有一张表: 如果为is ,则表示该用户当前具有该计划。 我想查询的是:(a)他当前正在使用的计划,或(b)他所参与的最新计划。对于每个给定的用户,我只需要返回一行。 现在,我设法通过使用联合和子查询做到了这一点,但是碰巧表很大,而且效率不高。你们中的每个人都可以有一种更快的查询方式吗? 谢谢, [编辑]多数答案在这里返回单个值。那是我的坏事。我的意思是为每个用户返回一个值,但一次返回

  • 本文向大家介绍MySQL多表数据记录查询详解,包括了MySQL多表数据记录查询详解的使用技巧和注意事项,需要的朋友参考一下 在实际应用中,经常需要实现在一个查询语句中显示多张表的数据,这就是所谓的多表数据记录连接查询,简称来年将诶查询。     在具体实现连接查询操作时,首先将两个或两个以上的表按照某个条件连接起来,然后再查询到所要求的数据记录。连接查询分为内连接查询和外连接查询。  在具体应用中

  • 与RDBMS类似,OrientDB支持不同类型的SQL查询以从数据库检索记录。 在检索记录时,我们有不同的变体或查询选项以及select语句。 以下语句是命令的基本语法。 以下是有关上述语法中选项的详细信息。 - 表示想从查询中提取的数据作为结果记录集。 - 表示要查询的对象。 这可以是一个类,群集,单个记录标识,一组记录标识。可以将所有这些对象指定为目标。 - 指定过滤结果集的条件。 - 表示在