`

MongoDB数据导入(mongoimport)和导出(mongoexport)

 
阅读更多

MongoDB提供了一个数据导入工具mongoimport ,先把需要导入的数据写入csv,然后用mongoimport导入,导入命令如下

mongoimport -d"mydb" -c"inventory" -f"date,id,views" --type=csv --file=data.csv

 

一、导出工具mongoexport

Mongodb中的mongoexport工具可以把一个collection导出成JSON格式或CSV格式的文件。可以通过参数指定导出的数据项,也可以根据指定的条件导出数据。mongoexport具体用法如下所示:

Shell代码  收藏代码
  1. [root@localhost mongodb]# ./bin/mongoexport --help  
  2. Export MongoDB data to CSV, TSV or JSON files.  
  3.   
  4. options:  
  5.   --help                    produce help message  
  6.   -v [ --verbose ]          be more verbose (include multiple times for more   
  7.                             verbosity e.g. -vvvvv)  
  8.   --version                 print the program's version and exit  
  9.   -h [ --host ] arg         mongo host to connect to ( <set name>/s1,s2 for   
  10.                             sets)  
  11.   --port arg                server port. Can also use --host hostname:port  
  12.   --ipv6                    enable IPv6 support (disabled by default)  
  13.   -u [ --username ] arg     username  
  14.   -p [ --password ] arg     password  
  15.   --dbpath arg              directly access mongod database files in the given   
  16.                             path, instead of connecting to a mongod  server -   
  17.                             needs to lock the data directory, so cannot be used  
  18.                             if a mongod is currently accessing the same path  
  19.   --directoryperdb          if dbpath specified, each db is in a separate   
  20.                             directory  
  21.   --journal                 enable journaling  
  22.   -d [ --db ] arg           database to use  
  23.   -c [ --collection ] arg   collection to use (some commands)  
  24.   -f [ --fields ] arg       comma separated list of field names e.g. -f   
  25.                             name,age  
  26.   --fieldFile arg           file with fields names - 1 per line  
  27.   -q [ --query ] arg        query filter, as a JSON string  
  28.   --csv                     export to csv instead of json  
  29.   -o [ --out ] arg          output file; if not specified, stdout is used  
  30.   --jsonArray               output to a json array rather than one object per   
  31.                             line  
  32.   -k [ --slaveOk ] arg (=1) use secondaries for export if available, default   
  33.                             true  

参数说明:

-h:指明数据库宿主机的IP

-u:指明数据库的用户名

-p:指明数据库的密码

-d:指明数据库的名字

-c:指明collection的名字

-f:指明要导出那些列

-o:指明到要导出的文件名

-q:指明导出数据的过滤条件

 

实例:test库中存在着一个students集合,集合中数据如下:

Js代码  收藏代码
  1. > db.students.find()  
  2. "_id" : ObjectId("5031143350f2481577ea81e5"), "classid" : 1, "age" : 20, "name" : "kobe" }  
  3. "_id" : ObjectId("5031144a50f2481577ea81e6"), "classid" : 1, "age" : 23, "name" : "nash" }  
  4. "_id" : ObjectId("5031145a50f2481577ea81e7"), "classid" : 2, "age" : 18, "name" : "james" }  
  5. "_id" : ObjectId("5031146a50f2481577ea81e8"), "classid" : 2, "age" : 19, "name" : "wade" }  
  6. "_id" : ObjectId("5031147450f2481577ea81e9"), "classid" : 2, "age" : 19, "name" : "bosh" }  
  7. "_id" : ObjectId("5031148650f2481577ea81ea"), "classid" : 2, "age" : 25, "name" : "allen" }  
  8. "_id" : ObjectId("5031149b50f2481577ea81eb"), "classid" : 1, "age" : 19, "name" : "howard" }  
  9. "_id" : ObjectId("503114a750f2481577ea81ec"), "classid" : 1, "age" : 22, "name" : "paul" }  
  10. "_id" : ObjectId("503114cd50f2481577ea81ed"), "classid" : 2, "age" : 24, "name" : "shane" }  

由上可以看出文档中存在着3个字段:classid、age、name

1.直接导出数据到文件中

Shell代码  收藏代码
  1. [root@localhost mongodb]# ./bin/mongoexport -d test -c students -o students.dat  
  2. connected to: 127.0.0.1  
  3. exported 9 records  

命令执行完后使用ll命令查看,发现目录下生成了一个students.dat的文件

Shell代码  收藏代码
  1. -rw-r--r-- 1 root root   869 Aug 21 00:05 students.dat  

查看该文件信息,具体信息如下:

Shell代码  收藏代码
  1. [root@localhost mongodb]# cat students.dat   
  2. "_id" : { "$oid" : "5031143350f2481577ea81e5" }, "classid" : 1"age" : 20"name" : "kobe" }  
  3. "_id" : { "$oid" : "5031144a50f2481577ea81e6" }, "classid" : 1"age" : 23"name" : "nash" }  
  4. "_id" : { "$oid" : "5031145a50f2481577ea81e7" }, "classid" : 2"age" : 18"name" : "james" }  
  5. "_id" : { "$oid" : "5031146a50f2481577ea81e8" }, "classid" : 2"age" : 19"name" : "wade" }  
  6. "_id" : { "$oid" : "5031147450f2481577ea81e9" }, "classid" : 2"age" : 19"name" : "bosh" }  
  7. "_id" : { "$oid" : "5031148650f2481577ea81ea" }, "classid" : 2"age" : 25"name" : "allen" }  
  8. "_id" : { "$oid" : "5031149b50f2481577ea81eb" }, "classid" : 1"age" : 19"name" : "howard" }  
  9. "_id" : { "$oid" : "503114a750f2481577ea81ec" }, "classid" : 1"age" : 22"name" : "paul" }  
  10. "_id" : { "$oid" : "503114cd50f2481577ea81ed" }, "classid" : 2"age" : 24"name" : "shane" }  

参数说明:

-d:指明使用的库,本例中为test

-c:指明要导出的集合,本例中为students

-o:指明要导出的文件名,本例中为students.dat

从上面的结果可以看出,我们在导出数据时没有显示指定导出样式 ,默认导出了JSON格式的数据。如果我们需要导出CSV格式的数据,则需要使用--csv参数,具体如下所示:

Shell代码  收藏代码
  1. [root@localhost mongodb]# ./bin/mongoexport -d test -c students --csv -f classid,name,age -o students_csv.dat  
  2. connected to: 127.0.0.1  
  3. exported 9 records  
  4. [root@localhost mongodb]# cat students_csv.dat   
  5. classid,name,age  
  6. 1.0,"kobe",20.0  
  7. 1.0,"nash",23.0  
  8. 2.0,"james",18.0  
  9. 2.0,"wade",19.0  
  10. 2.0,"bosh",19.0  
  11. 2.0,"allen",25.0  
  12. 1.0,"howard",19.0  
  13. 1.0,"paul",22.0  
  14. 2.0,"shane",24.0  
  15. [root@localhost mongodb]#   

参数说明:

-csv:指明要导出为csv格式

-f:指明需要导出classid、name、age这3列的数据

由上面结果可以看出,mongoexport成功地将数据根据csv格式导出到了students_csv.dat文件中。

 

二、导入工具mongoimport

Mongodb中的mongoimport工具可以把一个特定格式文件中的内容导入到指定的collection中。该工具可以导入JSON格式数据,也可以导入CSV格式数据。具体使用如下所示:

Shell代码  收藏代码
  1. [root@localhost mongodb]# ./bin/mongoimport --help  
  2. options:  
  3.   --help                  produce help message  
  4.   -v [ --verbose ]        be more verbose (include multiple times for more   
  5.                           verbosity e.g. -vvvvv)  
  6.   --version               print the program's version and exit  
  7.   -h [ --host ] arg       mongo host to connect to ( <set name>/s1,s2 for sets)  
  8.   --port arg              server port. Can also use --host hostname:port  
  9.   --ipv6                  enable IPv6 support (disabled by default)  
  10.   -u [ --username ] arg   username  
  11.   -p [ --password ] arg   password  
  12.   --dbpath arg            directly access mongod database files in the given   
  13.                           path, instead of connecting to a mongod  server -   
  14.                           needs to lock the data directory, so cannot be used   
  15.                           if a mongod is currently accessing the same path  
  16.   --directoryperdb        if dbpath specified, each db is in a separate   
  17.                           directory  
  18.   --journal               enable journaling  
  19.   -d [ --db ] arg         database to use  
  20.   -c [ --collection ] arg collection to use (some commands)  
  21.   -f [ --fields ] arg     comma separated list of field names e.g. -f name,age  
  22.   --fieldFile arg         file with fields names - 1 per line  
  23.   --ignoreBlanks          if given, empty fields in csv and tsv will be ignored  
  24.   --type arg              type of file to import.  default: json (json,csv,tsv)  
  25.   --file arg              file to import from; if not specified stdin is used  
  26.   --drop                  drop collection first   
  27.   --headerline            CSV,TSV only - use first line as headers  
  28.   --upsert                insert or update objects that already exist  
  29.   --upsertFields arg      comma-separated fields for the query part of the   
  30.                           upsert. You should make sure this is indexed  
  31.   --stopOnError           stop importing at first error rather than continuing  
  32.   --jsonArray             load a json array, not one item per line. Currently   
  33.                           limited to 4MB.  

参数说明:

-h:指明数据库宿主机的IP

-u:指明数据库的用户名

-p:指明数据库的密码

-d:指明数据库的名字

-c:指明collection的名字

-f:指明要导入那些列

 

示例:先删除students中的数据,并验证

Js代码  收藏代码
  1. > db.students.remove()  
  2. > db.students.find()  
  3. >   

然后再导入上面导出的students.dat文件中的内容

Shell代码  收藏代码
  1. [root@localhost mongodb]# ./bin/mongoimport -d test -c students students.dat   
  2. connected to: 127.0.0.1  
  3. imported 9 objects  
  4. [root@localhost mongodb]#   

参数说明:

-d:指明数据库名,本例中为test

-c:指明collection名,本例中为students

students.dat:导入的文件名

查询students集合中的数据

Js代码  收藏代码
  1. > db.students.find()  
  2. "_id" : ObjectId("5031143350f2481577ea81e5"), "classid" : 1, "age" : 20, "name" : "kobe" }  
  3. "_id" : ObjectId("5031144a50f2481577ea81e6"), "classid" : 1, "age" : 23, "name" : "nash" }  
  4. "_id" : ObjectId("5031145a50f2481577ea81e7"), "classid" : 2, "age" : 18, "name" : "james" }  
  5. "_id" : ObjectId("5031146a50f2481577ea81e8"), "classid" : 2, "age" : 19, "name" : "wade" }  
  6. "_id" : ObjectId("5031147450f2481577ea81e9"), "classid" : 2, "age" : 19, "name" : "bosh" }  
  7. "_id" : ObjectId("5031148650f2481577ea81ea"), "classid" : 2, "age" : 25, "name" : "allen" }  
  8. "_id" : ObjectId("5031149b50f2481577ea81eb"), "classid" : 1, "age" : 19, "name" : "howard" }  
  9. "_id" : ObjectId("503114a750f2481577ea81ec"), "classid" : 1, "age" : 22, "name" : "paul" }  
  10. "_id" : ObjectId("503114cd50f2481577ea81ed"), "classid" : 2, "age" : 24, "name" : "shane" }  
  11. >   

证明数据导入成功

上面演示的是导入JSON格式的文件中的内容,如果要导入CSV格式文件中的内容,则需要通过--type参数指定导入格式,具体如下所示:

先删除数据

Js代码  收藏代码
  1. > db.students.remove()  
  2. > db.students.find()  
  3. >   

再导入之前导出的students_csv.dat文件

 

Shell代码  收藏代码
  1. [root@localhost mongodb]# ./bin/mongoimport -d test -c students --type csv --headerline --file students_csv.dat   
  2. connected to: 127.0.0.1  
  3. imported 10 objects  
  4. [root@localhost mongodb]#   

参数说明:

-type:指明要导入的文件格式

-headerline:指明第一行是列名,不需要导入

-file:指明要导入的文件

查询students集合,验证导入是否成功:

 

Js代码  收藏代码
  1. > db.students.find()  
  2. "_id" : ObjectId("503266029355c632cd118ad8"), "classid" : 1, "name" : "kobe""age" : 20 }  
  3. "_id" : ObjectId("503266029355c632cd118ad9"), "classid" : 1, "name" : "nash""age" : 23 }  
  4. "_id" : ObjectId("503266029355c632cd118ada"), "classid" : 2, "name" : "james""age" : 18 }  
  5. "_id" : ObjectId("503266029355c632cd118adb"), "classid" : 2, "name" : "wade""age" : 19 }  
  6. "_id" : ObjectId("503266029355c632cd118adc"), "classid" : 2, "name" : "bosh""age" : 19 }  
  7. "_id" : ObjectId("503266029355c632cd118add"), "classid" : 2, "name" : "allen""age" : 25 }  
  8. "_id" : ObjectId("503266029355c632cd118ade"), "classid" : 1, "name" : "howard""age" : 19 }  
  9. "_id" : ObjectId("503266029355c632cd118adf"), "classid" : 1, "name" : "paul""age" : 22 }  
  10. "_id" : ObjectId("503266029355c632cd118ae0"), "classid" : 2, "name" : "shane""age" : 24 }  
  11. >   

说明已经导入成功 

分享到:
评论

相关推荐

    mongoDb导入数据csv说明文档

    本文将详细介绍如何使用 MongoDB 导入数据,包括使用 mongoimport 命令和 JavaScript 实现远程连接。 一、MongoDB 基础知识 MongoDB 是一个基于分布式文件存储的数据库,旨在为大规模数据存储提供高性能的解决方案...

    MongoDB导入与导出.pdf

    总结来说,MongoDB的`mongoexport`和`mongoimport`提供了强大的数据导入导出能力,能够灵活地处理各种数据格式,满足开发人员和管理员在数据管理中的多种需求。正确理解和使用这些工具,能有效提高工作效率,确保...

    MongoDB使用mongoexport和mongoimport命令,批量导出和导入JSON数据到同一张表的实例

    在MongoDB中,`mongoexport` 和 `mongoimport` 是两个实用的命令行工具,它们允许用户批量导出和导入JSON数据,这对于数据备份、迁移或数据处理非常有用。下面将详细介绍这两个命令的使用方法及其相关参数。 `...

    Mongo 数据导出、导入工具

    总结,MongoDB的数据导出和导入工具是管理MongoDB数据库不可或缺的部分,通过`mongoexport`和`mongoimport`,我们可以方便地进行数据备份、迁移和分析。了解并熟练掌握这些工具的使用,能够极大地提高工作效率,并...

    mongo 文档及 数据备份还原及导入导出手册

    总结,MongoDB 的文档管理和数据备份恢复是其核心功能,通过理解这些概念和工具,开发者能够更好地管理和保护 MongoDB 数据库。同时,了解数据导入导出方法有助于在不同环境间迁移数据,实现数据的高效流动。

    深入分析Mongodb数据的导入导出

    本文将深入分析MongoDB的数据导入导出,主要关注其内置工具`mongoexport`和`mongoimport`。 ### 一、MongoDB导出工具:mongoexport `mongoexport`是MongoDB提供的命令行工具,用于将MongoDB集合(collection)的...

    mongodb导出导入

    在MongoDB中,数据的导入与导出是日常运维和数据迁移的重要环节。 `mongodump` 和 `mongorestore` 是MongoDB官方提供的用于备份和恢复数据的工具,这两个命令对于数据的安全管理和迁移至关重要。 1. **mongodump**...

    mongo-3.6.3-aarch64.tar.gz

    在使用过程中,你可以利用MongoDB的管理工具如`mongodump`和`mongorestore`进行数据备份和恢复,`mongoexport`和`mongoimport`用于数据导入导出,以及`mongostat`和`mongotop`来监控数据库性能。 总的来说,MongoDB...

    mongogitbackup是一个将MongoDB文本导出存储在Github中的工具

    在需要恢复数据时,可以通过`mongoimport`命令将Git仓库中的文本数据导入回MongoDB数据库,确保数据的一致性。 MongoDB是目前广泛应用的NoSQL数据库,以其灵活的文档模型、高性能和高可用性而受到青睐。`...

    数据库导出

    `mongoimport`和`mongoexport`提供了便捷的方式,使用户能够轻松地在MongoDB数据库和JSON文件之间移动数据。这有助于数据备份、迁移以及在不同环境间同步数据,确保数据安全性和可用性。正确理解和使用这些工具,...

    MongoDB的备份与恢复1

    INTO OUTFILE`语句将MySQL数据导出为CSV文件,然后使用`mongoimport`导入到MongoDB。需要注意的是,数据格式和字段分隔符需要正确配置以适应导入。 在实际操作中,确保备份和恢复操作的安全性和完整性至关重要,这...

    mongodb tools.7z

    2. `mongoexport`:与`mongoimport`相反,它用于从MongoDB数据库导出数据,同样支持多种格式。 3. `mongodump`和`mongorestore`:这两个工具分别用于对MongoDB数据库进行完整备份和恢复,它们在灾难恢复和数据迁移...

    MongoDB单表数据的导出和恢复实例讲解

    对应于数据导出,MongoDB提供了`mongoimport`工具用于数据导入。使用`mongoimport`,我们可以将之前导出的JSON或CSV文件重新导入到MongoDB中。例如,将`trans.sp.json`文件导入回数据库,命令如下: ```bash $ ...

    mongodb-database-tools-windows-x86_64-100.3.1.zip

    4. mongoexport.exe:与mongoimport相反,它能将MongoDB数据导出为JSON、CSV或TSV格式的文件,便于数据分析或者在不同系统间转移数据。 5. mongofiles.exe:这是一个用于管理和操作MongoDB GridFS文件系统的命令行...

    MongoDB使用入门

    MongoDB提供了`mongoimport`和`mongoexport`命令用于数据的导入和导出。例如,如果你有一个名为`data.json`的文件,可以使用`mongoimport --db &lt;dbname&gt; --collection &lt;collectionname&gt; --file data.json`将其导入到...

    MongoDB数据库应用.docx

    6. 数据导出、导入:使用mongoexport 和 mongoimport 命令来导出和导入 MongoDB 数据。 7. 安全与认证:使用 MongoDB 的安全机制来保护数据,包括身份验证和访问控制。 8. 其他:MongoDB 还提供了其他一些功能,如 ...

Global site tag (gtag.js) - Google Analytics