mongodb的监控与性能优化
一.mongodb的监控
mongodb可以通过profile来监控数据,进行优化。
查看当前是否开启profile功能用命令
db.getProfilingLevel() 返回level等级,值为0|1|2,分别代表意思:0代表关闭,1代表记录慢命令,2代表全部
开始profile功能为
db.setProfilingLevel(level); #level等级,值同上
level为1的时候,慢命令默认值为100ms,更改为db.setProfilingLevel(level,slowms)如db.setProfilingLevel(1,50)这样就更改为50毫秒
通过db.system.profile.find() 查看当前的监控日志。
如:
- > db.system.profile.find({millis:{$gt:500}})
- { "ts" : ISODate("2011-07-23T02:50:13.941Z"), "info" : "query order.order reslen:11022 nscanned:672230 \nquery: { status: 1.0 } nreturned:101 bytes:11006 640ms", "millis" : 640 }
- { "ts" : ISODate("2011-07-23T02:51:00.096Z"), "info" : "query order.order reslen:11146 nscanned:672302 \nquery: { status: 1.0, user.uid: { $gt: 1663199.0 } } nreturned:101 bytes:11130 647ms", "millis" : 647 }
这里值的含义是
ts:命令执行时间
info:命令的内容
query:代表查询
order.order: 代表查询的库与集合
reslen:返回的结果集大小,byte数
nscanned:扫描记录数量
nquery:后面是查询条件
nreturned:返回记录数及用时
millis:所花时间
如果发现时间比较长,那么就需要作优化。
比如nscanned数很大,或者接近记录总数,那么可能没有用到索引查询。
reslen很大,有可能返回没必要的字段。
nreturned很大,那么有可能查询的时候没有加限制。
mongo可以通过db.serverStatus()查看mongod的运行状态
- > db.serverStatus()
- {
- "host" : "baobao-laptop",#主机名
- "version" : "1.8.2",#版本号
- "process" : "mongod",#进程名
- "uptime" : 15549,#运行时间
- "uptimeEstimate" : 15351,
- "localTime" : ISODate("2011-07-23T06:07:31.220Z"),当前时间
- "globalLock" : {
- "totalTime" : 15548525410,#总运行时间(ns)
- "lockTime" : 89206633, #总的锁时间(ns)
- "ratio" : 0.005737305027178137,#锁比值
- "currentQueue" : {
- "total" : 0,#当前需要执行的队列
- "readers" : 0,#读队列
- "writers" : 0#写队列
- },
- "activeClients" : {
- "total" : 0,#当前客户端执行的链接数
- "readers" : 0,#读链接数
- "writers" : 0#写链接数
- }
- },
- "mem" : {#内存情况
- "bits" : 32,#32位系统
- "resident" : 337,#占有物理内存数
- "virtual" : 599,#占有虚拟内存
- "supported" : true,#是否支持扩展内存
- "mapped" : 512
- },
- "connections" : {
- "current" : 2,#当前链接数
- "available" : 817#可用链接数
- },
- "extra_info" : {
- "note" : "fields vary by platform",
- "heap_usage_bytes" : 159008,#堆使用情况字节
- "page_faults" : 907 #页面故作
- },
- "indexCounters" : {
- "btree" : {
- "accesses" : 59963, #索引被访问数
- "hits" : 59963, #所以命中数
- "misses" : 0,#索引偏差数
- "resets" : 0,#复位数
- "missRatio" : 0#未命中率
- }
- },
- "backgroundFlushing" : {
- "flushes" : 259, #刷新次数
- "total_ms" : 3395, #刷新总花费时长
- "average_ms" : 13.108108108108109, #平均时长
- "last_ms" : 1, #最后一次时长
- "last_finished" : ISODate("2011-07-23T06:07:22.725Z")#最后刷新时间
- },
- "cursors" : {
- "totalOpen" : 0,#打开游标数
- "clientCursors_size" : 0,#客户端游标大小
- "timedOut" : 16#超时时间
- },
- "network" : {
- "bytesIn" : 285676177,#输入数据(byte)
- "bytesOut" : 286564,#输出数据(byte)
- "numRequests" : 2012348#请求数
- },
- "opcounters" : {
- "insert" : 2010000, #插入操作数
- "query" : 51,#查询操作数
- "update" : 5,#更新操作数
- "delete" : 0,#删除操作数
- "getmore" : 0,#获取更多的操作数
- "command" : 148#其他命令操作数
- },
- "asserts" : {#各个断言的数量
- "regular" : 0,
- "warning" : 0,
- "msg" : 0,
- "user" : 2131,
- "rollovers" : 0
- },
- "writeBacksQueued" : false,
- "ok" : 1
- }
db.stats()查看某一个库的原先状况
- > db.stats()
- {
- "db" : "order",#库名
- "collections" : 4,#集合数
- "objects" : 2011622,#记录数
- "avgObjSize" : 111.92214441878245,#每条记录的平均值
- "dataSize" : 225145048,#记录的总大小
- "storageSize" : 307323392,#预分配的存储空间
- "numExtents" : 21,#事件数
- "indexes" : 1,#索引数
- "indexSize" : 74187744,#所以大小
- "fileSize" : 1056702464,#文件大小
- "ok" : 1
- }
查看集合记录用
- > db.order.stats()
- {
- "ns" : "order.order",#命名空间
- "count" : 2010000,#记录数
- "size" : 225039600,#大小
- "avgObjSize" : 111.96,
- "storageSize" : 307186944,
- "numExtents" : 18,
- "nindexes" : 1,
- "lastExtentSize" : 56089856,
- "paddingFactor" : 1,
- "flags" : 1,
- "totalIndexSize" : 74187744,
- "indexSizes" : {
- "_id_" : 74187744#索引为_id_的索引大小
- },
- "ok" : 1
- }
mongostat命令查看运行中的实时统计,表示每秒实时执行的次数
mongodb还提供了一个机遇http的监控页面,可以访问http://ip:28017来查看,这个页面基本上是对上面的这些命令做了一下综合,所以这里不细述了。
二.mongodb的优化
根据上面这些监控手段,找到问题后,我们可以进行优化
上面找到了某一下慢的命令,现在我们可以通过执行计划跟踪一下,如
- > db.order.find({ "status": 1.0, "user.uid": { $gt: 2663199.0 } }).explain()
- {
- "cursor" : "BasicCursor",#游标类型
- "nscanned" : 2010000,#扫描数量
- "nscannedObjects" : 2010000,#扫描对象
- "n" : 337800,#返回数据
- "millis" : 2838,#耗时
- "nYields" : 0,
- "nChunkSkips" : 0,
- "isMultiKey" : false,
- "indexOnly" : false,
- "indexBounds" : {#使用索引(这里没有)
- }
- }
对于这样的,我们可以创建索引
可以通过 db.collection.ensureIndex({"字段名":1}) 来创建索引,1为升序,-1为降序,在已经有多数据的情况下,可用后台来执行,语句db.collection.ensureIndex({"字段名":1} , {backgroud:true})
获取索引用db.collection.getIndexes() 查看
这里我们创建一个user.uid的索引 >db.order.ensureIndex({"user.uid":1})
创建后重新执行
- db.order.find({ "status": 1.0, "user.uid": { $gt: 2663199.0 } }).explain()
- {
- "cursor" : "BtreeCursor user.uid_1",
- "nscanned" : 337800,
- "nscannedObjects" : 337800,
- "n" : 337800,
- "millis" : 1371,
- "nYields" : 0,
- "nChunkSkips" : 0,
- "isMultiKey" : false,
- "indexOnly" : false,
- "indexBounds" : {
- "user.uid" : [
- [
- 2663199,
- 1.7976931348623157e+308
- ]
- ]
- }
- }
扫描数量减少,速度提高。mongodb的索引设计类似与关系数据库,按索引查找加快书读,但是多了会对写有压力,所以这里就不再叙述了。
2.其他优化可以用hint强制索引查找,返回只是需要的数据,对数据分页等。
mongodb的监控与性能优化的更多相关文章
- Dynamic CRM 2013学习笔记(七)追踪、监控及性能优化
本文将介绍CRM的三个内容追踪.监控及性能优化.追踪是CRM里一个很有用的功能,它能为我们的CRM调试或解决错误.警告提供有价值的信息:我们可以用window的性能监控工具来了解CRM的性能状况:最后 ...
- Oracle管理监控之段空间利用监控-oracle性能优化
SELECT S.OWNER, S.SEGMENT_NAME, S.SEGMENT_TYPE, S.PARTITION_NAME, ROUND(BYTE ...
- Mongodb的性能优化问题
摘要 数据库性能对软件整体性能有着至关重要的影响,对于Mongodb数据库常用的性能优化方法主要有: 范式化与反范式化: 填充因子的使用: 索引的使用: 一. 范式化与反范式化 范式是为了消除重复数据 ...
- iOS性能优化总结
iOS性能优化总结.关于 iOS 性能优化梳理: 基本工具.业务优化.内存优化.卡顿优化.布局优化.电量优化. 安装包瘦身.启动优化.网络优化等. 关于iOS 性能优化梳理: 基本工具.业务优化.内存 ...
- mongodb可以通过profile来监控数据 (mongodb性能优化)
mongodb可以通过profile来监控数据 (mongodb性能优化) 开启 Profiling 功能 ,对慢查询进行优化: mongodb可以通过profile来监控数据,进行优化. 查看 ...
- MongoDB性能优化
一.索引 MongoDB 提供了多样性的索引支持,索引信息被保存在system.indexes 中,且默认总是为_id创建索引,它的索引使用基本和MySQL 等关系型数据库一样.其实可以这样说说,索引 ...
- MongoDB性能优化指南
一.索引 MongoDB 提供了多样性的索引支持,索引信息被保存在system.indexes 中,且默认总是为_id创建索引,它的索引使用基本和MySQL 等关系型数据库一样.其实可以这样说说,索引 ...
- Mongodb高级篇-性能优化
1.监控 mongodb可以通过profile来监控数据,进行优化. 查看当前是否开启profile功能用命令:db.getProfilingLevel()返回level等级,值为0|1|2,分别代表 ...
- MongoDB学习笔记(四)--索引 && 性能优化
索引 基础索引 ...
随机推荐
- 没有Path的Binding
当Binding源本身就是数据且不需要Path来指明时,可以设置Path的值为".",或直接省略Path.XAML中这个"."可以省略不写,但在C#代码中是不能 ...
- php xml 操作。
参考 文章:http://www.cnblogs.com/zcy_soft/archive/2011/01/26/1945482.html DOMDocument相关的内容. 属性: Attribut ...
- idea编辑器HttpServlet httpServlet = ServletActionContext.getServletContext().getRealPath();方法无法使用
HttpServlet httpServlet = ServletActionContext.getServletContext().getRealPath(); 前几天在使用idea的时候发现这个方 ...
- Maven常用命令(转)
Maven库: http://repo2.maven.org/maven2/ Maven依赖查询: http://mvnrepository.com/ Maven常用命令: 1. 创建Maven的普通 ...
- JSP学习——语法
JSP模版元素 JSP表达式 JSP脚本片断 JSP注释JSP指令JSP标签 JSP内置对象如何查找JSP页面中的错误 1:JSP模版元素 : JSP页面中的HTML内容称之为JSP模版元素. JSP ...
- mysql中替换行首字符
替换行首字符,而不替换字段中其它地方指定字符. UPDATE table SET open_time = CONCAT('W', open_time) WHERE open_time REGEXP ' ...
- Facebook内部分享:25个高效工作的小技巧
Facebook内部分享:25个高效工作的小技巧 Facebook 内部分享:不论你如何富有,你都赚不到更多的时间,你也回不到过去.没有那么多的假如,只有指针滴答的时光飞逝和你应该好好把握的现在,以下 ...
- Python学习笔记8—语句
条件语句 有的程序里写的是 /usr/bin Python,表示 Python 解释器在/usr/bin 里面.但是,如果写成 /usr/bin/env,则表示要通过系统搜索路径寻找 Python 解 ...
- Python学习笔记3—字符串
原始字符串 使用\转义或者r,这种方法在网站设置网站目录结构的时候非常管用. >>> dos="c:\news" >>> print dos c ...
- 转!!java中Object转String
Object转为String的几种形式 在java项目的实际开发和应用中,常常需要用到将对象转为String这一基本功能.本文将对常用的转换方法进行一个总结.常用的方法有Object.toString ...