`

mongodb笔记

阅读更多
1. 32位的MongoDB数据量受限于2.5GB,The reason for this is that the MongoDB storage engine uses memory-mapped files for performance.
   所以推荐使用64-bit的MongoDB。
2. fsync时可以选择加上lock选项,此时所有的写操作将被阻塞,读操作仍然可用,但若此时有写操作,则读操作也被阻塞,因为用的是读写锁。使用unlock命令进行解锁。
3. 未使用--journal选项时,使用getlasterror命令+fsync选项获取最后一次命令执行的结果,则会强制将内存中的数据同步到data files,并返回是否成功结果,可用于同步执行更新操作(safe mode),确保更新操作成功执行。
4. fsync会将内存中的数据写入到物理data files中,若开启--journal选项,则fsync会等待下一次group commit将内存中数据写入到journal文件,而非data files,然后返回。
5. 开启--journal选项时,数据先写入到内存,然后间隔地执行group commit,批量将内存中的数据写入到journal文件。一般在100ms的间隔。
6. 开启--journal选项时,内存数据会间隙性地批量提交到journal,并且也会更大间隔地提交到data files,一旦数据进入data files,那么对应的journal文件会被滚动掉(rotate out)。
7. getlasterror没有带fsync选项时,只要写入到内存即返回成功,否则会迫使内存中数据写入到data files或journal文件,然后返回成功或失败。
8. 有些driver实现了安全模式(safe mode),即更新需要实时返回是否成功的结果。
9. 新版本中的索引创建支持在后台进行,并不影响更新数据的速度。
10.db.currentOp()当前正在执行的操作。
11.注意对于mongodb来说BSON结构中的属性是有顺序的。(如联合索引是{a, b},则查询时以{b, a}顺序是无法使用上该联合索引的)。
12.对于组合索引匹配条件是查询中全部"列"出现,或组合索引中第一个"列"出现。
13.sparse index不会包含不存在该field的document,且该索引只能有一个field。如:该索引的field为a,那么find({a : null})不包含a字段的document不会返回,而find({b : null})会返回不包含b字段的document。
14.物理位置的索引,在1.9.1之前精确匹配只支持物理坐标数据是以数组形式存储时。当前版本只支持一个collection一个物理索引。
15.在修改某条document记录时,如果大小有变动,由于mongodb底层实现会预留空间,所以不需要从新移动数据。
16.何时建立索引:需要查询的field建立索引,需要排序的field建立索引,若是联合索引,则sort field排在最后。
Note that adding an index slows writes to a collection, but not reads. Use lots of indexes for collections with a high read / write ratio (assuming one does not mind the storage overage). For collections with more writes than reads, indexes are very expensive.
17.  db.things.group(
          {
              keyf : function(obj) {return {w : obj.x + obj.j};},
              reduce : function(obj, prev) {prev.csum += obj.j;},
              initial : {csum : 0}
           }
       )
关于finalize: http://kylebanker.com/blog/2009/11/mongodb-advanced-grouping/
18. 获取更新操作的结果,db.runCommand("getlasterror")
{
        "updatedExisting" : true,//为更新操作,且有document被更新
        "n" : 39, //更新document数
        "connectionId" : 22,
        "err" : null,
        "ok" : 1
}
{
        "updatedExisting" : false, //为更新操作,但没有document被更新
        "upserted" : ObjectId("4dbd73b17479e34a59c101a7"),//若upsert为insert结果
        "n" : 1,
        "connectionId" : 22,
        "err" : null,
        "ok" : 1
}
19. example.js
       db = db.getSisterDB("test");
       db.things.update({j : 32}, {$set : {x : 4000}});
20. 对于大数据量的操作可以使用db.eval()在服务器端执行逻辑,以免传输大量数据到客户端所带来的性能瓶颈。
       db.eval() is used to evaluate a function (written in JavaScript) at the database server.
21. 一个时刻服务端对于javascript的执行仅有单个线程。
22. mongod --fork --auth --logpath=/data/db-log/mongo.log --logappend --journal
       使用journal启动选项来进行crash时的自动恢复,不行还可以使用mongod --repair进行修复
       使用journal时如果需要预先分配硬盘空间,那么会生成3G的prealloc.0[1,2]文件,可以连续空间写,加快速度,真正写journal时,会变成j._0形式,退出时又恢复为prealloc形式,所以为加快启动速度,可以先生成好这3个文件,然后拷贝到该目录即可立即启动
23. 可以使用logrotate来滚动mongod的日志
       refer: http://groups.google.com/group/mongodb-user/browse_thread/thread/2b014f27697387f9
                 http://notes.alexdong.com/logrotate-settings-for-mongodb(use web proxy)
24. Can I use the journaling feature to perform safe hot backups?
       Not yet, as the journal files are rotated out (unlinked) after data is safely in the data files.
25. Unix上的推荐额外配置
    a. turn off atime
       备份/etc/fstab, 编辑fstab,在需要关闭atime属性的分区option上添加,noatime,nodiratime
    b. Set file descriptor limit
       vi /etc/security/limits.conf,添加*    soft    nofile     65536
    c. Do not use large VM pages with Linux
    d. better to use ext4, xfs file system
26. 可以使用rs.stepDown(120)使当前primary放弃primary权利,在120秒后如果没有人接管primary,则自己从新申请成为primary
       rs.freeze(120)使当前node冻结成为primary的权利120s
       可以使用上述两个命令强制使某个node成为primary
27. 源码编译安装
       http://www.mongodb.org/display/DOCS/Building+for+Linux
       r1.8.1bug修复https://github.com/mongodb/mongo/commit/831eee02a5564354c600535ffa14803bcf27534d
       https://jira.mongodb.org/browse/SERVER/fixforversion/10263#atl_token=ASGJ-NC06-6R0X-EKH7%7C32faddb7f89fc5c30c68e1c0b963d9b5998d01f3%7Clout&selectedTab=com.atlassian.jira.plugin.system.project%3Aversion-summary-panel
28. replica set中的启动命令+参数,较优
    mongod --replSet foo --port 27017 --dbpath /data/r0 --rest --fork --logpath=/tmp/mongod-27017.log --logappend --directoryperdb
    最好设置directoryperdb,这样硬盘空间不足,需要创建新DB时,可以挂载新的硬盘卷到相应DB的目录,这样新的DB文件就存放在新的硬盘卷上。
    mongod --replSet foo --port 27018 --dbpath /data/r1 --rest --fork --logpath=/tmp/mongod-27018.log --logappend --journal --directoryperdb
    对于primary最好不要使用journal选项,提高系统的性能,如果db crash可以使用secondary上文件进行替换恢复,而secondary可以使用该选项,方便crash自动恢复。
29. 缩短磁盘刷新间隔 --syndelay
    60s(default) => 15~30s

分享到:
评论

相关推荐

    MongoDB笔记.docx

    ### MongoDB核心知识点详解 #### MongoDB简介 MongoDB是一款开源的NoSQL数据库系统,与传统的关系型数据库不同,它采用了一种灵活的数据模型——文档模型,这使得它在处理半结构化和非结构化的数据时非常高效。...

    MongoDB笔记.md

    MongoDB笔记,含Ubuntu18.04安装MongoDB教程及入门教程。

    mongodb笔记和资料

    mongodb笔记和资料,配套视频:https://www.bilibili.com/list/474327672?sid=4493759&spm_id_from=333.999.0.0&desc=1

    mongodb笔记,服务安装 CRUD语法,及node服务端操作MongoDB

    mongodb笔记,服务安装 CRUD语法,及node服务端操作MongoDB

    mongoDB笔记整理

    MongoDB笔记整理 MongoDB 是一个基于分布式文件存储的数据库,由 C++ 语言编写,旨在为 WEB 应用提供可扩展的高性能数据存储解决方案。下面是 MongoDB 的详细知识点: 1. 简介 MongoDB 是一个介于关系数据库和非...

    mongodb学习笔记

    mongodb学习笔记 MongoDB 是一个基于分布式文件存储的开源数据库系统,主要用于处理大量数据的存储和查询。以下是 MongoDB 的一些基本操作和技巧: 插入文档 MongoDB 中可以使用 `insert` 方法来插入文档,例如 ...

    MongoDB学习笔记

    MongoDB 是一种流行的开源、高性能、无模式的文档型数据库,尤其适合于处理大量结构化和半结构化数据。在本文中,我们将深入探讨MongoDB的一些核心概念和操作,包括其丰富的数据类型、易扩展性、功能强大的索引和...

    mongodb笔记.md

    mongod --storageEngine mmapv1 --dbpath "d:\mongodb\db" --logpath "d:\mongodb\log\MongoDB.log" --install --serviceName "MongoDB" ``` - 启动服务: ``` net start MongoDB ``` - 关闭服务: ``` ...

    express+mongodb笔记

    【Express + MongoDB 知识点详解】 Express 是一个基于 Node.js 平台的简洁、灵活的Web应用开发框架,它简化了HTTP服务器的创建过程,提供了丰富的中间件系统,使得开发者能够快速构建从简单的API到复杂的web应用。...

    mongodb笔记(五分钟快速回忆)

    不用再花太多时间去看视频,找资料,通过思维导图,能让你快速回忆mongodb数据库的知识点,其中包裹聚合以及与Python交互。

    mongo学习笔记.doc

    MongoDB基本知识整理。 Mongodb导出与导入命令、创建分片、创建复制集等。

    李兴华java笔记

    《李兴华Java实战经典笔记》是一份深入探讨Java编程技术的宝贵资料,由知名IT教育专家李兴华编撰。这份笔记集合了他在教学和实践中积累的丰富经验,旨在帮助学习者掌握Java的核心概念、设计模式以及实战技巧。通过这...

    MongoDB 入门教程笔记

    MongoDB 入门教程笔记

    尚硅谷-Mongodb

    尚硅谷-Mongodb,课件资料,源码,给力的学习资料,没有密码

    mldn 李兴华笔记

    《李兴华笔记》是针对Java学习的一系列珍贵资料,主要由MLDN(可能是某个教育机构或个人的缩写)出版。这些笔记包含了丰富的学习内容,对于初学者和有一定经验的开发者来说,都是很好的参考资料。下面,我们将深入...

    mongdb学习笔记

    Mongodb,分布式文档存储数据库,由C++语言编写,旨在为WEB应用提供可扩展的高性能数据存储解决方案。MongoDB是一个高性能,开源,无模式的文档型数据库,是当前NoSql数据库中比较热门的一种。它在许多场景下可用于...

    MongoDB学习笔记(五) MongoDB文件存取操作

    由于MongoDB的文档结构为BJSON格式(BJSON全称:Binary JSON),而BJSON格式本身就支持保存二进制格式的数据,因此可以把文件的二进制格式的数据直接保存到MongoDB的文档结构中。但是由于一个BJSON的最大长度不能...

    mongodb学习笔记资料

    mongodb学习笔记资料,从安装到操作库collection 对document的crud 索引 replicaSet sharding 备份与恢复

Global site tag (gtag.js) - Google Analytics