设为首页 收藏本站
查看: 1682|回复: 0

[经验分享] mongo分析工具(转)

[复制链接]

尚未签到

发表于 2016-12-2 08:48:42 | 显示全部楼层 |阅读模式
mongostat详解
DSC0000.png mongostat是mongdb自带的状态检测工具,在命令行下使用。它会间隔固定时间获取mongodb的当前运行状态,并输出。如果你发现数据库突然变慢或者有其他问题的话,你第一手的操作就考虑采用mongostat来查看mongo的状态。
它的输出有以下几列:

  • inserts/s 每秒插入次数
  • query/s 每秒查询次数
  • update/s 每秒更新次数
  • delete/s 每秒删除次数
  • getmore/s 每秒执行getmore次数
  • command/s 每秒的命令数,比以上插入、查找、更新、删除的综合还多,还统计了别的命令
  • flushs/s 每秒执行fsync将数据写入硬盘的次数。
  • mapped/s 所有的被mmap的数据量,单位是MB,
  • vsize 虚拟内存使用量,单位MB
  • res 物理内存使用量,单位MB
  • faults/s 每秒访问失败数(只有Linux有),数据被交换出物理内存,放到swap。不要超过100,否则就是机器内存太小,造成频繁swap写入。此时要升级内存或者扩展
  • locked % 被锁的时间百分比,尽量控制在50%以下吧
  • idx miss % 索引不命中所占百分比。如果太高的话就要考虑索引是不是少了
  • q t|r|w 当Mongodb接收到太多的命令而数据库被锁住无法执行完成,它会将命令加入队列。这一栏显示了总共、读、写3个队列的长度,都为0的话表示mongo毫无压力。高并发时,一般队列值会升高。
  • conn 当前连接数
  • time 时间戳
使用profiler
DSC0001.png 类似于MySQL的slow log, MongoDB可以监控所有慢的以及不慢的查询。
Profiler默认是关闭的,你可以选择全部开启,或者有慢查询的时候开启。
1> use test

2switched to db test

3> db.setProfilingLevel(2);

4{"was" : 0 , "slowms" : 100, "ok" : 1} // "was" is the old setting

5> db.getProfilingLevel()

62



查看Profile日志
1> db.system.profile.find().sort({$natural:-1})

2{"ts" : "Thu Jan 29 2009 15:19:32 GMT-0500 (EST)" , "info" :

3"query test.$cmd ntoreturn:1 reslen:66 nscanned:0 query: { profile: 2 } nreturned:1 bytes:50" ,

4"millis" : 0} ...



3个字段的意义

  • ts:时间戳
  • info:具体的操作
  • millis:操作所花时间,毫秒
不多说,此处有官方文档。注意,造成满查询可能是索引的问题,也可能是数据不在内存造成因此磁盘读入造成。
使用Web控制台
DSC0002.png Mongodb自带了Web控制台,默认和数据服务一同开启。他的端口在Mongodb数据库服务器端口的基础上加1000,如果是默认的Mongodb数据服务端口(Which is 27017),则相应的Web端口为28017
这个页面可以看到

  • 当前Mongodb的所有连接
  • 各个数据库和Collection的访问统计,包括:Reads, Writes, Queries, GetMores ,Inserts, Updates, Removes
  • 写锁的状态
  • 以及日志文件的最后几百行(CentOS+10gen yum 安装的mongodb默认的日志文件位于/var/log/mongo/mongod.log)
可以参考右边的截图
db.stat()
获取当前数据库的信息,比如Obj总数、数据库总大小、平均Obj大小等
01> use test

02switched to db test

03> db.stats()

04{

05    "collections" : 9,

06    "objects" : 4278845,

07    "avgObjSize" : 224.56603031892953,

08    "dataSize" : 960883236,

09    "storageSize" : 1195438080,

10    "numExtents" : 59,

11    "indexes" : 13,

12    "indexSize" : 801931264,

13    "fileSize" : 6373244928,

14    "ok" : 1

15}



db.serverStatus()
获取服务器的状态
01{

02    "version" : "1.6.5",

03    "uptime" : 7208469,

04    "uptimeEstimate" : 7138829,

05    "localTime" : "Wed Oct 26 2011 22:23:07 GMT+0800 (CST)",

06    "globalLock" : {

07        "totalTime" : 7208469556704,

08        "lockTime" : 4959693717,

09        "ratio" : 0.000688036992871448,

10        "currentQueue" : {

11            "total" : 0,

12            "readers" : 0,

13            "writers" : 0

14        }

15    },

16    "mem" : {

17        "bits" : 64,

18        "resident" : 3131,

19        "virtual" : 6172,

20        "supported" : true,

21        "mapped" : 4927

22    },

23    "connections" : {

24        "current" : 402,

25        "available" : 2599

26    },

27    "extra_info" : {

28        "note" : "fields vary by platform",

29        "heap_usage_bytes" : 832531920,

30        "page_faults" : 8757

31    },

32    "indexCounters" : {

33        "btree" : {

34            "accesses" : 2821726,

35            "hits" : 2821725,

36            "misses" : 1,

37            "resets" : 0,

38            "missRatio" : 3.543930204420982e-7

39        }

40    },

41    "backgroundFlushing" : {

42        "flushes" : 120133,

43        "total_ms" : 73235923,

44        "average_ms" : 609.6236920746173,

45        "last_ms" : 1332,

46        "last_finished" : "Wed Oct 26 2011 22:22:23 GMT+0800 (CST)"

47    },

48    "cursors" : {

49        "totalOpen" : 0,

50        "clientCursors_size" : 0,

51        "timedOut" : 238392

52    },

53    "repl" : {

54        "ismaster" : true

55    },

56    "opcounters" : {

57        "insert" : 269351,

58        "query" : 19331151,

59        "update" : 14199331,

60        "delete" : 1,

61        "getmore" : 145575,

62        "command" : 55982302

63    },

64    "asserts" : {

65        "regular" : 0,

66        "warning" : 0,

67        "msg" : 0,

68        "user" : 27,

69        "rollovers" : 0

70    },

71    "ok" : 1

72}



需要关心的地方:

  • connections 当前连接和可用连接数,听过一个同行介绍过,mongodb最大处理到2000个连接就不行了(要根据你的机器性能和业务来设定),所以设大了没意义。设个合理值的话,到达这个值mongodb就拒绝新的连接请求,避免被太多的连接拖垮。
  • indexCounters:btree:misses 索引的不命中数,和hits的比例高就要考虑索引是否正确建立。你看我的”missRatio” : 3.543930204420982e-7,很健康吧。所以miss率在mongostat里面也可以看
  • 其他的都能自解释,也不是查看mongo健康状况的关键,就不说明了。
db.currentOp()
Mongodb 的命令一般很快就完成,但是在一台繁忙的机器或者有比较慢的命令时,你可以通过db.currentOp()获取当前正在执行的操作。
在没有负载的机器上,该命令基本上都是返回空的
1>  db.currentOp()

2{ "inprog" : [ ] }



以下是一个有负载的机器上得到的返回值样例:
1{ "opid" : "shard3:466404288", "active" : false, "waitingForLock" : false, "op": "query", "ns" : "sd.usersEmails", "query" : { }, "client_s" :"10.121.13.8:34473", "desc" : "conn" },



字段名字都能自解释。如果你发现一个操作太长,把数据库卡死的话,可以用这个命令杀死他
1> db.killOp("shard3:466404288")



MongoDB Monitoring Service
DSC0003.png
MongoDB Monitoring Service(MMS)是Mongodb厂商提供的监控服务,可以在网页和Android客户端上监控你的MongoDB状况。请参考

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-308455-1-1.html 上篇帖子: mongo查询内嵌文档 下篇帖子: Mongo操作常用命令
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表