MongoDB单表数据的导出和恢复实例讲解_MongoDB

MongoDB 是一个跨平台的,面向文档的数据库,提供高性能,高可用性和可扩展性方便。 MongoDB 工作在收集和文件的概念。

数据库

数据库是一个物理容器集合。每个数据库都有自己的一套文件系统上的文件。一个单一的MongoDB服务器通常有多个数据库。

集合

集合是一组MongoDB的文档。它相当于一个RDBMS表。收集存在于一个单一的数据库。集合不执行模式。集合内的文档可以有不同的领域。通常情况下,一个集合中的所有文件是相同或相关的目的。

文档

文档是一组键 - 值对。文件动态模式。动态模式是指,在相同集合中的文档不需要具有相同的字段或结构组的公共字段的集合的文档,可以容纳不同类型的数据。

1. 单表数据的导出

针对单表数据的导出操作,MongoDB 提供了 mongoexport 命令。mongoexport 既可以将数据导出为 CSV 格式的文件,也可以导出 JSON 格式的文件。这两者之间的区别是:

JSON 是 mongoexport 默认的导出格式,不需要指定,而要导出 CSV 格式的话需要明确指定;导出 CSV 格式必须显式指定各属性名,而导出 JSON 格式不需要。由此可见导出 JSON 格式更灵活、更方便,而且对于复杂的表结构还不会有属性丢失的风险,因此笔者比较倾向于这种导出格式。本文示例用的就是这种格式。

trans.sp 表结构如下:

{
"_id" : ObjectId("56ea7cc7ec8d83257c013844"),
"orderNum" : "804918166317174541239",
"sysOrderNum" : "43fd399715df4e874c773373c422a896",
"respCode" : "09",
"merId" : "991653448160401",
"transAmt" : NumberLong(300),
"transStatus" : "10",
"transType" : NumberInt(1),
"chanMerId" : "1244891002",
"chanCode" : "WXP",
"createTime" : "2016-03-17 17:45:43",
"updateTime" : "2016-03-17 17:45:43",
"refundStatus" : NumberInt(0),
"fee" : NumberLong(2),
"netFee" : NumberLong(2),
"tradeFrom" : "openapi",
"lockFlag" : NumberInt(0),
"settRole" : "WXP",
"currency" : "CNY",
"busicd" : "PAUT",
"agentCode" : "25911283",
"qrCode" : "weixin://wxpay/bizpayurl?pr=lh73Vjt",
"terminalid" : "802918",
"errorDetail" : "处理中",
"goodsInfo" : "双山趣儿85g,3.0,1",
"discountAmt" : NumberLong(0),
"merName" : "云高科技服务有限公司",
"agentName" : "白山机构"
}

使用 mongoexport 将该表导出:

$ mongoexport --host localhost --port 27017 --username quicktest --password quicktest --collection trans.sp --db quicktest --out trans.sp.json
2016-03-14T14:23:36.985+0800 connected to: localhost:27017
2016-03-14T14:29:28.085+0800 exported 2823382 records

trans.sp.json 大小为 2.6 G,共计两百八十万条记录,本次导出耗时 6 分钟。各参数具体说明:
--host 后的 localhost:要导出数据库 ip--port 后的 27017:要导出的实例节点端口号--username 后的 quicktest:数据库用户名--password 后的 quicktest:数据库用户密码--collection 后的 trans.sp:要导出的表名--db 后的 quicktest:要导出的表所在数据库名--out 后的 trans.sp.json:要导出的文件路径(默认为当前文件夹)

2. 单表数据的导入

有借有还,MongoDB 提供了与 mongoexport 命令相对应命令 mongoimport。以下是导入命令:
$ mongoimport --host localhost --port 27019 --username quicktest --password quicktest --collection trans.sp --db quicktest --file /opt/kdf/trans.sp.json
2016-03-17T18:15:33.909+0800 connected to: localhost:27019
2016-03-17T18:15:36.888+0800 [........................] quicktest.trans.sp 1
5.0 MB/2.5 GB (0.6%)

各参数具体说明:

-- host 后的 localhost:要导入的数据库 ip--port 后的 27019:要导入的实例节点端口号--username 后的 quicktest:数据库用户名--password 后的 quicktest:数据库用户密码--collection 后的 trans.sp:要导入的表名--db 后的 quicktest:要导入的表所在数据库名--file 后的 /opt/kdf/trans.sp.json:要导入的源文件路径(默认为当前文件夹)就这么简单。
但是有一些地方还是需要注意一下的:

mongoimport 执行导入前,新数据库中没有 trans.sp 表一样可以导入成功;mongoexport 和 mongoimport 所需的各个参数输入的先后顺序不严格;对于副本集,mongoexport 的数据导出可以是副本集中的 primary 节点,也可以是 secondary 节点;对于副本集,mongoimport 的数据导入必须是 primary 节点;对于大数据量的导出,用 mongoexport 操作完全不会有生产问题;对于大数据量的导入(超过 500 MB),用 mongoimport 操作的话会很容易将 primary 节点拖垮,因为这会导致全量同步导致主节点崩溃,所以要避免生产环境中大数据量的导入。正确的做法是先建立单点,导入,之后再建立副本集。本文示例中所用 MongoDB 版本号为 3.2.1。

关于MongoDB单表数据的导出和恢复实例讲解知识就给大家介绍到这里,希望对大家有所帮助!

以上是小编为您精心准备的的内容,在的博客、问答、公众号、人物、课程等栏目也有的相关内容,欢迎继续使用右上角搜索按钮进行搜索mongodb导出和恢复
mongodb单表数据
java操作mongodb实例、mongodb实例、mongodb项目实例、mongodb mybatis 实例、mongodb 多实例,以便于您获取更多的相关知识。

时间: 2024-08-20 01:34:34

MongoDB单表数据的导出和恢复实例讲解_MongoDB的相关文章

mysql 导出单表数据/备份单表数据语句

前两天遇到数据用source命令恢复数据时,提示包过大的错误.那个包用mymanager导出的,这次用mysql自带mysqldump工具成功导出并导入到数据表中. mysqldump 导出数据库某个表的数据方法如下:  代码如下 复制代码 mysqldump -t -u root -p -B article --table article_detail > e:/www.111cn.net/my.sql 其中article是数据库,article_detail是数据表(只导出了数据未包含结构)

数据泵避免个别表数据的导出

对于数据泵EXPDP/IMPDP而言,功能比普通EXP/IMP功能要强的多,因此也可以实现一些普通导出导入工具很难完成的工作.     比如今天碰到的这个问题,要导出一些表,但是其中个别表只导出结构而不导出数据. SQL> conn test/testConnected.SQL> set pages 100 lines 120SQL> select count(*) from t;   COUNT(*)----------        23 SQL> select count(*

CentOS6.4 配置mysql服务器启动多个端口,同步单表数据

============================================================ ====多端口启动==== ============================================================ 创建数据目录 mkdir /usr/local/mysql/var1/ mkdir /usr/local/mysql/var2/ =================================================

【框架】[Hibernate]利用Hibernate进行单表的增删改查-Web实例

转载请注明出处:http://blog.csdn.net/qq_26525215 本文源自[大学之旅_谙忆的博客] 前面两篇博客已经将Hibernate的基础知识讲解得差不多了,差不多到写实例的时候了. 本篇只用hibernate进行单表的增删改查. 应用Hibernate,对students表进行增删改查. service层和DAO层,我都是直接写实现类了(因为这里主要是演示一下Hibernate的使用),如果是开发项目,注意一定要写接口! 准备数据库: 首先准备一个students表: cr

Nodejs获取网络数据导出Excel表格实例讲解

Nodejs的生成Excel表格的模块有很多,我们先来看一下node-xlsx 首先,先安装Excel的模块: npm install node-xlsx 然后,在代码中引入模块: var xlsx = require('node-xlsx'); 最后,获取数据并写入Excel: var fs = require('fs'); var xlsx = require('node-xlsx'); var ajax = require('./ajax.js'); start(); function s

oralce数据泵如何避免个别表数据的导出

对于数据泵EXPDP/IMPDP而言,功能比普通EXP/IMP功能要强的多,因此也可以实现一些普通导出导入工具很难完成的工作. 比如今天碰到的这个问题,要导出一些表,但是其中个别表只导出结构而不导出数据. SQL> conn test/test Connected. SQL> set pages 100 lines 120 SQL> select count(*) from t; COUNT(*) ---------- 23 SQL> select count(*) from tt

MongoDB中强大的统计框架Aggregation使用实例解析_MongoDB

听说项目里面Aggregation用的多,那就专门针对这个多多练习一下. 基本的操作包括: •$project - 可以从子文档中提取字段,可以重命名字段 •$match - 可以实现查找的功能 •$limit - 接受一个数字n,返回结果集中的前n个文档. •$skip - 接受一个数字n,丢弃结果集中的前n个文档.效率比较低,依然会遍历前n个文档. •$unwind - 可以将一个包含数组的文档切分成多个, 比如你的文档有 中有个数组字段 A, A中有10个元素, 那么经过 $unwind处

MongoDB 主从复制实例讲解_MongoDB

主从复制可以用来做数据库的备份,故障恢复,读写分离. 本实验使用Mongodb 3.2版本,我们先查看一下mongod的帮助 [root@localhost mongodb]# mongod --help .....省略 Master/slave options (old; use replica sets instead): --master master mode --slave slave mode --source arg when slave: specify master as <s

Spark SQL数据加载和保存实例讲解

一.前置知识详解 Spark SQL重要是操作DataFrame,DataFrame本身提供了save和load的操作, Load:可以创建DataFrame, Save:把DataFrame中的数据保存到文件或者说与具体的格式来指明我们要读取的文件的类型以及与具体的格式来指出我们要输出的文件是什么类型. 二.Spark SQL读写数据代码实战 import org.apache.spark.SparkConf; import org.apache.spark.api.java.JavaRDD;