MongoDB如何查询耗时记录的方法详解

 更新时间:2017年09月14日 11:33:31   作者:Chain  
查询操作是我们日常操作数据库经常会遇到的一个功能,下面这篇文章主要给大家介绍了关于MongoDB如何查询耗时记录的相关资料,文中通过示例代码介绍的非常详细,需要的朋友可以参考借鉴,下面来一起看看吧。

准备

在此之前,我们先在我们的数据库中插入10万条数据。数据的格式是这样的:

{
 "name":"your name",
 "age":22,
 "gender":"male",
 "grade":2
}

explain

explain方法是用来查看db.collecion.find()的一些查询信息的。例如:

db.collectionName.find().explain()

explain方法有个可选的参数verbose,是个字符串,他表示的是verbose的模式。一共分为3种模式:

queryPlanner:默认参数,详细说明查询优化器选择的计划并列出被拒绝的计划。例如:

db.students.find({grade:1}).explain()

executionStats:MongoDB运行查询优化器选择获胜的计划,执行计划,完成并返回成功,统计描述的胜利计划的执行。例如:

db.students.find({grade:1}).explain("executionStats")


allPlansExecution:MongoDB返回描述获奖计划的执行以及对其他候选人统计计划选择方案时捕获的统计。
我们的目的是要记录执行find方法的耗时时间,所以用executionStats模式就可以了。

返回的结果也是只关注executionStats就可以了,如下图:


  1. nReturned:表示该查询条件下返回的文档数量。
  2. executionTimeMills:表示执行时间,单位毫秒
  3. totalDocsExamined:表示该集合总共文档数。

其他的属性在这里就不多说了,记录耗时我们只取executionTimeMills.

Profiling

上面提到的方法好像是只适用find方法,对于一些聚合查询之类的查询方法就无法统计耗时时间了。这里再介绍一个profiling方法记录查询耗时时间。

开启 Profiling 功能

有两种方式可以控制 Profiling 的开关和级别,第一种是直接在启动参数里直接进行设置。

  • 启动MongoDB时加上–profile=级别 即可。
  • 也可以在客户端调用db.setProfilingLevel(级别)命令来实时配置。可以通过db.getProfilingLevel()命令来获取当前的Profile级别。

例如:

db.setProfilingLevel(2)
db.getProfilingLevel()

Profiling一共分为3个级别:

  • 0 - 不开启。
  • 1 - 记录慢命令 (默认为>100ms)
  • 3 - 记录所有命令

Profile 记录在级别1时会记录慢命令,那么这个慢的定义是什么?上面我们说到其默认为100ms,当然有默认就有设置,其设置方法和级别一样有两种,一种是通过添 加–slowms启动参数配置。第二种是调用db.setProfilingLevel时加上第二个参数:

db.setProfilingLevel( level , slowms)
db.setProfilingLevel( 1 , 10 );

查询 Profiling 记录

开启profiling功能后,系统会把相关命令详细信息记录到当前数据库的system.profile集合里。查询方法也是跟普通的集合查询一样。

db.system.profile.find()

其中,mills就是命令耗时记录。

由于我们设置的级别是2,所以所有命令都有记录,现在我们把他改为级别1,且只记录耗时20毫秒以上的记录:

 db.setProfilingLevel( 1 , 20)

然后我们再执行一下聚合查询,查看下耗时时间:

db.students.aggregate( {$group:{_id:"$grade",avgAge:{$avg:"$age"}}} )

db.system.profile.find().pretty()


可以看出,我们的这聚合查询耗时70毫秒。

profile 部分字段解释

  • op:操作类型
  • ns:被查的集合
  • commond:命令的内容
  • docsExamined:扫描文档数
  • nreturned:返回记录数
  • millis:耗时时间,单位毫秒
  • ts:命令执行时间
  • responseLength:返回内容长度

下面介绍几个常用的查询命令:

列出执行时间长于某一限度(例如:20ms)的 Profile 记录.

db.system.profile.find({millis:{$gt:50}})

查看最新的 3条Profile 记录:

db.system.profile.find().sort({$natural:-1}).limit(3)

查看关于某个collection的相关慢查询操作:

db.system.profile.find({ns:'mydb.students'})

MongoDB 查询优化

  docsExamined(扫描的记录数)远大于nreturned(返回结果的记录数)的话,那么我们就要考虑通过加索引来优化记录定位了。

  responseLength 如果过大,那么说明我们返回的结果集太大了,这时请查看find函数的第二个参数是否只写上了你需要的属性名。(类似 于MySQL中不要总是select)

  对于创建索引的建议是:如果很少读,那么尽量不要添加索引,因为索引越多,写操作会越慢。如果读量很大,那么创建索引还是比较划算的。

Profiler 的效率

  Profiling 功能肯定是会影响效率的,但是不太严重,原因是他使用的是system.profile 来记录,而system.profile 是一个capped collection 这种collection 在操作上有一些限制和特点,但是效率更高。

总结

以上就是这篇文章的全部内容了,希望本文的内容对大家的学习或者工作具有一定的参考学习价值,如果有疑问大家可以留言交流,谢谢大家对脚本之家的支持。

相关文章

  • MongoDB中常用操作$addToSet、$pop和$rename

    MongoDB中常用操作$addToSet、$pop和$rename

    本文主要介绍了MongoDB中常用操作$addToSet、$pop和$rename,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧
    2023-12-12
  • MongoDB数据库授权认证的实现

    MongoDB数据库授权认证的实现

    本文主要介绍了MongoDB数据库授权认证的实现,文中通过示例代码介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们可以参考一下
    2021-12-12
  • MongoDB基础之文档操作

    MongoDB基础之文档操作

    这篇文章介绍了MongoDB基础之文档操作,文中通过示例代码介绍的非常详细。对大家的学习或工作具有一定的参考借鉴价值,需要的朋友可以参考下
    2022-06-06
  • Windows安装压缩版MongoDB的教程

    Windows安装压缩版MongoDB的教程

    MongoDB 是一个介于关系数据库和非关系数据库之间的产品,是非关系数据库当中功能最丰富,最像关系数据库的。这篇文章主要介绍了Windows安装压缩版MongoDB的教程,需要的朋友可以参考下
    2019-12-12
  • java操作mongoDB查询的实例详解

    java操作mongoDB查询的实例详解

    这篇文章主要介绍了java操作mongo查询的实例详解的相关资料,希望通过本文能帮助到大家,需要的朋友可以参考下
    2017-09-09
  • MongoDB日志切割的三种方式总结

    MongoDB日志切割的三种方式总结

    mongo默认是没有进行日志分割的,所有的日志持续写到一个文件中,缺点是很明显的,日志文件会越来越大,下面这篇文章主要给大家介绍了关于MongoDB日志切割的三种方式,需要的朋友可以参考下
    2021-09-09
  • windows与mac安装mongodb数据库的方法步骤与注意事项

    windows与mac安装mongodb数据库的方法步骤与注意事项

    今天小编就为大家分享一篇关于windows与mac安装mongodb数据库的方法步骤与注意事项,小编觉得内容挺不错的,现在分享给大家,具有很好的参考价值,需要的朋友一起跟随小编来看看吧
    2019-03-03
  • 一次线上mongo慢查询问题排查处理记录

    一次线上mongo慢查询问题排查处理记录

    这篇文章主要给大家介绍了一次线上mongo慢查询问题排查处理的相关资料,文中通过实例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下
    2022-03-03
  • MongoDB 事务支持详解

    MongoDB 事务支持详解

    这篇文章主要介绍了MongoDB 事务支持详解的相关资料,需要的朋友可以参考下
    2022-12-12
  • mongoDB分页的两种方法(图例)

    mongoDB分页的两种方法(图例)

    mongoDB分页的两种方法,mongoDB的分页查询是通过limit(),skip(),sort()这三个函数组合进行分页查询的。
    2013-11-11

最新评论