`

MongoDB运行状态、性能监控,分析

阅读更多

不好意思,由于转载的网址设置了防盗链,所以图片显示不出来,可以点击下面的链接看原问,我的目的就是想和大家分享一下。

转自:http://blog.nosqlfan.com/html/3346.html
使用任何一个产品,必不可少的一项工作就是对存储的监控,监控可以让你更了解存储的运作方式,让你更早的发现使用上的问题,下面文章转自泛城科技技术博客,对MongoDB的监控做了详细深入的探讨。推荐给各位使用MongoDB的朋友。

原文链接:tech.lezi.com

这篇文章的目的是让你知道怎么了解你正在运行的Mongdb是否健康。

mongostat详解

mongostat是mongdb自带的状态检测工具,在命令行下使用。它会间隔固定时间获取mongodb的当前运行状态,并输出。如果你发现数据库突然变慢或者有其他问题的话,你第一手的操作就考虑采用mongostat来查看mongo的状态。

它的输出有以下几列:

  • inserts/s 每秒插入次数
  • query/s 每秒查询次数
  • update/s 每秒更新次数
  • delete/s 每秒删除次数
  • getmore/s 每秒执行getmore次数
  • command/s 每秒的命令数,比以上插入、查找、更新、删除的综合还多,还统计了别的命令
  • flushs/s 每秒执行fsync将数据写入硬盘的次数。
  • mapped/s 所有的被mmap的数据量,单位是MB,
  • vsize 虚拟内存使用量,单位MB
  • res 物理内存使用量,单位MB
  • faults/s 每秒访问失败数(只有Linux有),数据被交换出物理内存,放到swap。不要超过100,否则就是机器内存太小,造成频繁swap写入。此时要升级内存或者扩展
  • locked % 被锁的时间百分比,尽量控制在50%以下吧
  • idx miss % 索引不命中所占百分比。如果太高的话就要考虑索引是不是少了
  • q t|r|w 当Mongodb接收到太多的命令而数据库被锁住无法执行完成,它会将命令加入队列。这一栏显示了总共、读、写3个队列的长度,都为0的话表示mongo毫无压力。高并发时,一般队列值会升高。
  • conn 当前连接数
  • time 时间戳

使用profiler

类似于MySQL的slow log, MongoDB可以监控所有慢的以及不慢的查询。

Profiler默认是关闭的,你可以选择全部开启,或者有慢查询的时候开启。

> use test
switched to db test
> db.setProfilingLevel(2);
{"was" : 0 , "slowms" : 100, "ok" : 1} // "was" is the old setting
> db.getProfilingLevel()

查看Profile日志

> db.system.profile.find().sort({$natural:-1})
{"ts" : "Thu Jan 29 2009 15:19:32 GMT-0500 (EST)" , "info" :
"query test.$cmd ntoreturn:1 reslen:66 nscanned:0 query: { profile: 2 } nreturned:1 bytes:50" ,
"millis" : 0} ...

3个字段的意义

  • ts:时间戳
  • info:具体的操作
  • millis:操作所花时间,毫秒

不多说,此处有官方文档。注意,造成满查询可能是索引的问题,也可能是数据不在内存造成因此磁盘读入造成。

使用Web控制台

Mongodb自带了Web控制台,默认和数据服务一同开启。他的端口在Mongodb数据库服务器端口的基础上加1000,如果是默认的Mongodb数据服务端口(Which is 27017),则相应的Web端口为28017

这个页面可以看到

  • 当前Mongodb的所有连接
  • 各个数据库和Collection的访问统计,包括:Reads, Writes, Queries, GetMores ,Inserts, Updates, Removes
  • 写锁的状态
  • 以及日志文件的最后几百行(CentOS+10gen yum 安装的mongodb默认的日志文件位于/var/log/mongo/mongod.log)

可以参考右边的截图

db.stat()

获取当前数据库的信息,比如Obj总数、数据库总大小、平均Obj大小等

> use test
switched to db test
> db.stats()
{
    "collections" : 9,
    "objects" : 4278845,
    "avgObjSize" : 224.56603031892953,
    "dataSize" : 960883236,
    "storageSize" : 1195438080,
    "numExtents" : 59,
    "indexes" : 13,
    "indexSize" : 801931264,
    "fileSize" : 6373244928,
    "ok" : 1
}

db.serverStatus()

获取服务器的状态

{
    "version" : "1.6.5",
    "uptime" : 7208469,
    "uptimeEstimate" : 7138829,
    "localTime" : "Wed Oct 26 2011 22:23:07 GMT+0800 (CST)",
    "globalLock" : {
        "totalTime" : 7208469556704,
        "lockTime" : 4959693717,
        "ratio" : 0.000688036992871448,
        "currentQueue" : {
            "total" : 0,
            "readers" : 0,
            "writers" : 0
        }
    },
    "mem" : {
        "bits" : 64,
        "resident" : 3131,
        "virtual" : 6172,
        "supported" : true,
        "mapped" : 4927
    },
    "connections" : {
        "current" : 402,
        "available" : 2599
    },
    "extra_info" : {
        "note" : "fields vary by platform",
        "heap_usage_bytes" : 832531920,
        "page_faults" : 8757
    },
    "indexCounters" : {
        "btree" : {
            "accesses" : 2821726,
            "hits" : 2821725,
            "misses" : 1,
            "resets" : 0,
            "missRatio" : 3.543930204420982e-7
        }
    },
    "backgroundFlushing" : {
        "flushes" : 120133,
        "total_ms" : 73235923,
        "average_ms" : 609.6236920746173,
        "last_ms" : 1332,
        "last_finished" : "Wed Oct 26 2011 22:22:23 GMT+0800 (CST)"
    },
    "cursors" : {
        "totalOpen" : 0,
        "clientCursors_size" : 0,
        "timedOut" : 238392
    },
    "repl" : {
        "ismaster" : true
    },
    "opcounters" : {
        "insert" : 269351,
        "query" : 19331151,
        "update" : 14199331,
        "delete" : 1,
        "getmore" : 145575,
        "command" : 55982302
    },
    "asserts" : {
        "regular" : 0,
        "warning" : 0,
        "msg" : 0,
        "user" : 27,
        "rollovers" : 0
    },
    "ok" : 1
}

需要关心的地方:

  • connections 当前连接和可用连接数,听过一个同行介绍过,mongodb最大处理到2000个连接就不行了(要根据你的机器性能和业务来设定),所以设大了没意义。设个合理值的话,到达这个值mongodb就拒绝新的连接请求,避免被太多的连接拖垮。
  • indexCounters:btree:misses 索引的不命中数,和hits的比例高就要考虑索引是否正确建立。你看我的”missRatio” : 3.543930204420982e-7,很健康吧。所以miss率在mongostat里面也可以看
  • 其他的都能自解释,也不是查看mongo健康状况的关键,就不说明了。

db.currentOp()

Mongodb 的命令一般很快就完成,但是在一台繁忙的机器或者有比较慢的命令时,你可以通过db.currentOp()获取当前正在执行的操作。

在没有负载的机器上,该命令基本上都是返回空的

>  db.currentOp()
{ "inprog" : [ ] }

以下是一个有负载的机器上得到的返回值样例:

{ "opid" : "shard3:466404288", "active" : false, "waitingForLock" : false, "op" : "query", "ns" : "sd.usersEmails", "query" : { }, "client_s" : "10.121.13.8:34473", "desc" : "conn" },

字段名字都能自解释。如果你发现一个操作太长,把数据库卡死的话,可以用这个命令杀死他

> db.killOp("shard3:466404288")

MongoDB Monitoring Service

MongoDB Monitoring Service(MMS)是Mongodb厂商提供的监控服务,可以在网页和Android客户端上监控你的MongoDB状况。请参考

分享到:
评论
发表评论

文章已被作者锁定,不允许评论。

相关推荐

    MongoDB运行状态监控、性能分析工具mongostat详解

    主要介绍了MongoDB运行状态监控、性能分析工具mongostat详解,mongostat是mongdb自带的状态检测工具,在命令行下使用,它会间隔固定时间获取mongodb的当前运行状态,并输出,本文详细讲解了它的使用,需要的朋友可以参考下

    mongodb性能监控

    MongoDB 是一个流行的开源文档数据库系统,以其高性能、高...同时,也可以结合其他工具,如 MongoDB 的管理工具套件(如 MongoDB Compass)、系统监控工具(如 Nagios 或 Grafana)等,进行更全面的性能监控和分析。

    MongoDB性能优化及监控

    MongoDB提供了丰富的监控工具和API,用于收集和分析数据库的运行状态,包括CPU利用率、内存使用、磁盘I/O、网络流量等关键指标。监控数据可以帮助识别性能瓶颈,及时调整配置或优化查询。MongoDB的监控可以通过`db....

    nagios监控mongodb插件

    对于MongoDB监控,我们需要一个专门的Python插件,它可以连接到MongoDB服务器,收集诸如连接状态、查询性能、存储容量等信息。 在监控MongoDB分片集群时,我们关注的要点包括: 1. **分片状态**:确保所有分片都...

    Zabbix MongoDB监控模板.xml

    总结来说,"Zabbix MongoDB监控模板.xml"是实现高效MongoDB监控的关键,它提供了全面的监控点和警报机制,帮助管理员实时掌握MongoDB的运行状态,及时发现并解决问题,确保系统的稳定性和数据的安全性。通过深入理解...

    云数据库MongoDB监控指标解读与关注.pdf

    关键指标的详解可以帮助我们深入理解数据库的运行状态。一些关键指标例如: - Asserts指标:包括常规断言数量、消息断言数量、翻转断言数量和用户断言数量。当某个断言值超过2^30时会重置为0重新计数。这些指标通常...

    MongoDB监控与runCommand命令.pdf

    在管理和优化 MongoDB 实例时,监控其运行状态至关重要。本文将深入探讨 MongoDB 的监控工具,特别是 `mongostat` 和 `mongotop` 命令,以及它们在监控数据库性能中的作用。 首先,`mongostat` 是一个实用工具,...

    mongodb查询性能.rar

    5. **监控与分析**:使用`db.serverStatus()`和`db.stats()`等命令监控MongoDB的运行状态,定期检查慢查询日志,找出性能瓶颈。 6. **硬件配置**:适当增加硬件资源,如增加内存、使用更快的硬盘或采用SSD,都可以...

    Python-mtools一组脚本用于设置MongoDB测试环境并分析和可视化MongoDB日志文件

    总的来说,`Python-mtools` 是一个对MongoDB开发者和管理员极具价值的工具,它将日常的运维工作变得更加高效,同时增强了对MongoDB运行状态的洞察力。无论是快速搭建测试环境还是深入分析日志,都能体现出它的强大...

    mongodb性能优化.pptx

    MongoDB提供了多种内置工具帮助用户监控数据库的状态,这些工具对于性能调优至关重要。下面详细介绍几种常用的监控工具。 ##### 1. Mongotop Mongotop是一款命令行工具,用于实时监控MongoDB实例上的活动。它可以...

    MongoDB监控.pdf

    `mongostat`是MongoDB自带的状态监测工具,用于周期性地输出MongoDB当前的运行状态。通过观察这些指标,可以及时发现潜在的问题。 ##### 启动方式 - 在安装MongoDB的目录下的`bin`目录中,输入`mongostat`命令即可...

    Python-Mongoop长时间的MongoDB操作监控和报警

    6. **监控和响应**:根据Mongoop提供的信息,监控MongoDB的运行状态,及时处理报警事件。 通过以上介绍,我们可以看到Mongoop在MongoDB运维中扮演着重要角色,它可以帮助我们提高MongoDB的稳定性和性能,降低故障率...

    MongoDB流量-流量分析

    MongoDB流量分析是数据库性能监控和优化的关键环节,特别是在大数据处理和实时应用中,MongoDB作为流行的NoSQL数据库,其流量分析能帮助我们理解数据库的运行状况,优化查询效率,确保系统的稳定性和高可用性。...

    MongoDB的执行计划分析与巡检分享.pdf

    - **mtools**:一组由MongoDB官方工程师开发的命令行工具,包括mlogfilter、mloginfo、mplotqueries等,用于日志管理和性能监控。 - **mlogfilter**:用于过滤MongoDB的日志文件,可以提取特定的信息。 - **...

    Windows-MongoDB-4.4.1-x64.zip

    7. **性能监控**:MongoDB 4.4提供了更强大的性能监控工具,帮助管理员更好地理解和优化系统性能。 在Windows环境下,MongoDB的管理和监控可以通过图形界面工具MongoDB Compass完成。它提供了直观的界面来查看数据...

    mongodb 手册,帮助文件。

    - **运行状态**:监控 MongoDB 的运行状态。 **3.2 安全考虑** - **身份验证**:启用用户身份验证。 - **加密通信**:配置 SSL/TLS 加密。 - **防火墙设置**:设置防火墙规则以保护 MongoDB 服务器。 - **访问控制...

    Python-nagiospluginmongodb检查MongoDB状态的Nagios插件

    总结来说,`nagios-plugin-mongodb`是Nagios监控体系中的一个重要组件,它允许运维人员利用Python的灵活性和MongoDB的丰富API,对MongoDB数据库进行深度检查和性能监控,从而确保数据库服务的高效、可靠运行。...

Global site tag (gtag.js) - Google Analytics