首页 / MONGODB / MongoDB 备份与还原 mongodump、mongorestore

MongoDB 备份与还原 mongodump、mongorestore

内容导读

互联网集市收集整理的这篇技术教程文章主要介绍了MongoDB 备份与还原 mongodump、mongorestore，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含7053字，纯文字阅读大概需要11分钟。

内容图文

MongoDB 备份与还原 mongodump、mongorestore

MongoDB 备份与还原
- 一、 MongoDB 备份
- 二、MongoDB 还原

MongoDB 备份与还原

一、 MongoDB 备份

MongoDB 备份的几种方式：

mongodump
系统快照(这里不做详细介绍，具体内容见官网：Back Up with Filesystem Snapshots)
cp 或者 rsync

1、mongodump

? mongodump 是 MongoDB 官方提供的备份工具，它可以从 MongoDB 数据库读取数据，并生成 BSON 文件，mongodump 适合用于备份和恢复数据量较小的 MongoDB 数据库，不适用于大数据量备份。

? 默认情况下 mongodump 不获取 local 数据库里面的内容。

? mongodump 仅备份数据库中的文档，不备份索引，所以我们还原后，需要重新生成索引。

? mongodump 备份过程中会对 mongod 服务的性能产生影响，我们建议在业务低峰期进行操作。如果我们备份的数据，大于系统内存，我们备份的时候容易出现错误。

在执行 mongodump 的时候，mongod 服务还是可以提供服务的，可以进行修改数据，如果我们在备份的时候加上参数 --oplog 的话，那么 oplog 是会记录这一次操作的，如果我们想在 restore 的时候也有日志记录，我们可以使用 mongorestore --oplogReplay 进行恢复

1.1、mongodump常用命令和参数

官方文档：mongodump

mongodump 默认输出的目录名为 dump ,如果输出路径包含 dump 目录，会直接覆盖的。默认备份是没有压缩的。

参数：

--host <hostname><:port>, -h <hostname><:port>  # 指定备份的主机ip和端口号，默认值localhost:27017
--port # 指定端口号 默认27017

--username <username>, -u <username> # 指定用户名
--password <password>, -p <password> # 指定密码
--authenticationDatabase <dbname> # 指定认证的数据库
--authenticationMechanism <name> # 指定认证的算法 ，默认值 SCRAM-SHA-1
--db <database>, -d <database> # 指定备份的数据库，未指定的话，备份所有的数据库，但不包含local库
--collection <collection>, -c <collection> # 指定备份的集合，未指定则备份指定库中的所有集合。
--query <json>, -q <json>  # 指定 json 作为查询条件。来备份我们过滤后的数据。
--queryFile <path>  # 指定 json 文档路径，以该文档的内容作为查询条件，来备份我们过滤后的数据。
--quit # 通过抑制 MongoDB的复制，连接等活动，来实现备份。
--gzip  # 开启压缩，3.2版本后可以使用，输出为文件的话会带有后缀.gz
--out <path>, -o <path>  # 输出的目录路径

--repir # 修复数据时使用 下面有详细介绍
--oplog # mongodump 会将 mongodump 执行期间的 oplog 日志 输出到文件 oplog.bson，这就意味着从备份开始到备份结束的数据操作我们都可以记录下来。
--archive <file> # 输出到单个存档文件或者是直接输出。


--dumpDbUsersAndRoles # 只有在 使用 --db 时才适用，备份数据库的包含的用户和角色。
--excludeCollection string # 排除指定的集合，如果要排除多个，使用多个--excludeCollection 
--numParallelCollections int, -j int # 并行导出的集合数，默认为4


--ssl  # 指定 TLS/SSL 协议
--sslCAFile filename # 指定认证文件名
--sslPEMKeyFile <filename>
--sslPEMKeyPassword <value>
--sslCRLFile <filename>
--sslAllowInvalidCertificates
--sslAllowInvalidHostnames
--sslFIPSMode

示例：

排除指定的集合

mongodump  --db test --excludeCollection=users --excludeCollection=salaries

指定ip,端口，用户名，认证，压缩，输出目录

mongodump --host mongodb1.example.net --port 37017 --username user --password "pass" --gzip --out /opt/backup/mongodump-2019-04-17

1.2 、注意

当我们的删除一个集合的数据，这个集合有10000条数据，那么在 Oplog 里面也是会有 10000条删除记录。

这样的操作就会导致 Oplog 里面的之前的操作记录会被快速覆盖。

所以我们在备份的时候，需要注意备份的间隔时间和 Oplog 记录被覆盖的时间(也就是 Oplog 记录了多长时间的日志 )。要后者大于前者。

示例：

? 我们的备份计划是，每天备份一次数据，Oplog 记录的保持时间要大于1天。

Oplog 的开启是需要开启副本集才能开启的，所以以上备份策略是针对副本集。

2 、cp 或者rsync

? 我们可以直接复制数据文件，但是我们必须在复制文件前停止对 MongoDB 的操作，否则我们复制的文件是无效的。

3、单节点意外关闭后，如何恢复数据

注意以下操作是针对单节点。

在意外关闭节点后，我们进行重新节点，发现有如下的日志错误：

2018-10-24T18:05:18.248-0400 W STORAGE  [initandlisten] Detected unclean shutdown - mongod.lock is not empty.

...

2018-10-24T17:24:53.122-0400 E STORAGE  [initandlisten] Failed to get the cursor for uri: table:collection-2-6854866147293273505
2018-10-24T17:24:53.122-0400 E STORAGE  [initandlisten] This may be due to missing data files. ...

...

***aborting after fassert() failure

并且在数据储存路径中有一个 mongod.lock 文件。

我们可以使用 mongod --repair 来恢复数据。

在MongoDB中4.0.3，对 WiredTiger 引擎，使用该命令会进行以下操作

重建所有索引

丢弃损坏的数据

为残缺的元数据创建存根文件。

对于MMAPv1 引擎

重建所有索引

丢弃损坏的数据

数据恢复流程：

先备份现有的数据

我们可以用 cp 命令将现有的数据的整个目录的所有文件都备份一份。

使用 mongod --repair

# 针对 所有数据库
mongod --repair 
# 针对 单个数据库
mongod --dbpath /opt/mongodb/data/djx  --repair

一般情况下，你不应该手动删除该mongod.lock文件。而是，使用上述过程来恢复数据库。在严峻的情况下，您可以删除文件，使用可能损坏的文件启动数据库，并尝试从数据库中恢复数据，但这存在风险。

4、查看备份数据

我们部分的数据都是二进制的，我们直接查看是查看不到的，那么我们可以通过工具 bsondump(安装 MongoDB 自带了) 来进行查看。

[root@djx uu_dev]# bsondump  order_detail.bson
2019-04-17T16:14:51.430+0800    549 objects found
{"_id":{"$oid":"5cae98d0f23d932dscdfc2ff"}}
{"_id":{"$oid":"5cae98d0f23d932dscdfca00"}}
{"_id":{"$oid":"5cae98d1f23d932dscdfca31"}}
{"_id":{"$oid":"5cae98d1f23d932dscdfca32"}}

二、MongoDB 还原

1、mongorestore特点

mongorestore 可以创建新的数据库或将数据添加到现有的数据库，但是 mongorestore 仅仅执行insert 操作，不执行 update操作。这就意味着如果将文档还原到现有的数据库，现有的数据库中的文档的_id的值和要还原的文档中的_id 值是一样的，是不会将数据库原有的值覆盖的。
重建索引，mongorestore 会重建索引。
mongorestore 不恢复 system.profile 的数据

2、mongorestore 常用参数

--help # 查看帮助
--quiet # 通过抑制 MongoDB的复制，连接等活动，来实现数据恢复。

--host <hostname><:port>, -h <hostname><:port>  # 指定恢复的主机ip和端口号，默认值localhost:27017
--port # 指定端口号 默认27017

--username <username>, -u <username> # 指定用户名
--password <password>, -p <password> # 指定密码
--authenticationDatabase <dbname> # 指定认证的数据库
--authenticationMechanism <name> # 指定认证的算法 ，默认值 SCRAM-SHA-1
--objcheck # 开启验证，验证还原操作，确保没有无效的文档插入数据库。会有较小的性能影响
--oplogReplay # 恢复备份数据并将 mongodump 执行期间的操作(记录在导出的日志)恢复。
--oplogLimit  # 指定恢复
--oplogFile # 指定 Oplog 路径
--keepIndexVersion # 阻止mongorestore在还原过程中将索引升级到最新版本。
--restoreDbUsersAndRoles # 还原指定的数据库用户和角色。
--maintainInsertionOrder # 默认值为False,如果为 True,mongorestore 将按照输入源的文档顺序插入，否则是 随机执行插入。
--numParallelCollections int, -j int # 指定并行恢复的集合数。
--numInsertionWorkersPerCollection int # 默认值为 1，指定每个集合恢复的并发数，大数据量导入增加该值可提高 恢复速度。
--gzip # 从压缩文档中 恢复。
--archive # 从归档文件中恢复。
--dir # 指定还原数据储存目录。

3、还原示例

mongorestore --collection people --db accounts dump/
mongorestore --host mongodb1.example.net --port 37017 --username user --password "pass" /opt/backup/mongodump-2011-10-24
mongorestore --gzip --archive=test.20150715.gz --db test
mongorestore --archive=test.20150715.archive --db test

内容总结

以上是互联网集市为您收集整理的MongoDB 备份与还原 mongodump、mongorestore全部内容，希望文章能够帮你解决MongoDB 备份与还原 mongodump、mongorestore所遇到的程序开发问题。如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。

内容备注

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容，请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。

内容手机端

扫描二维码推送至手机访问。

本文链接：https://qyyshop.com/info/880029.html

来源：【匿名】

【上一篇】SpringBoot 整合mongoDB并自定义连接池【下一篇】在MongoDB上如何进行数据的导入与导出

更多 ►

【MongoDB 备份与还原 mongodump、mongorestore】教程文章相关的互联网学习教程文章

mongodb数据导入导出以及备份恢复

数据导出 mongoexport 假设库里有一张user 表，里面有2 条记录，我们要将它导出 > use my_mongodb switched to db my_mongodb > db.user.find(); { "_id" : ObjectId("4f81a4a1779282ca68fd8a5a"), "uid" : 2, "username" : "Jerry", "age" : 100 } { "_id" : ObjectId("4f844d1847d25a9ce5f120c4"), "uid" : 1, "username" : "Tom", "age" : 25 } > 1 常用导出方法 [root @localhost bin]# ./mongoexport -d my_mongodb -c user ...

mongodb数据库自动备份 windows【代码】【图】

1、新建空白txt文档在文档中输入以下代码，其中1）D:\mongoDB\data\backup\ 为备份文件的路径2）D:\Mongodb\bin\mongodump为mongodb的bin目录下的备份命令的路径3）databasename ：替换为自己的数据库名字4）最后将.txt替换为.bat文件@ECHO OFF md D:\mongoDB\data\backup\%date:~0,4%-%date:~5,2%-%date:~8,2% D:\Mongodb\bin\mongodump -h 127.0.0.1 -d databasename -o D:\mongoDB\data\backup\%date:~0,4%-%date:~5,2%-%date:~...

mongodb的导入/导出/备份/还原

mongodb的导入/导出/备份/还原1.mongoexport是mongo自带的数据导入工具,使用方法比较简单,以下是mongoexport常用的几个参数.[root@localhost admin]# mongoexport --help -h [ --host ] # 主机ip --port # 端口 -u [ --username ] # 验证用户名 -p [ --password ] # 验证密码 --authenticationDatabase # 身份验证库 -d [ --db ] ...

python mongodb增量备份脚本【代码】

首先，需要搭建mongodb副本集，才能进行增量备份，此过程略过本人的构想是每天进行一次备份，这次备份是全量备份还是增量备份取决于最后一次全量备份的时间节点的日志是否已被覆盖(因为oplog的大小是有上限的，所以新的操作会覆盖旧的)，如果已被覆盖，则进行全量备份，否则从该时间节点开始进行增量备份。为了方便，每次全量备份完成后会将oplog.bson放到固定的地方代码如下：# encoding: utf-8import argparseimport calendarimp...

【转】MongoDB导入导出以及数据库备份

-------------------MongoDB数据导入与导出-------------------1、导出工具：mongoexport 1、概念： mongoDB中的mongoexport工具可以把一个collection导出成JSON格式或CSV格式的文件。可以通过参数指定导出的数据项，也可以根据指定的条件导出数据。 2、语法： mongoexport -d dbname -c collectionname -o file --type json/csv -f field 参数说明： -d ：数据库名 -c ：collec...

mongodb 的备份恢复导入与导出【代码】【图】

导入导出use hndb;db.s.save({name:‘李四‘,age:18,score:80,address:‘郑州‘});db.s.save({name:‘李三‘,age:8,score:50,address:‘郑州‘});db.s.save({name:‘张三‘,age:38,score:20,address:‘天津‘});db.s.save({name:‘赵六‘,age:28,score:70,address:‘郑州‘});db.s.save({name:‘王五五‘,age:19,score:90,address:‘北京‘});只导出name字段旧 mongoexport localhost:27017/admin -d hndb -c s -u admin -p admin ...

mongodb增量备份方法【代码】

首先应用了别人写的mongobackup的文件包去这个网址下载：http://pan.baidu.com/s/15YsBs把mongobackup的文件下载到你的mongodb的bin目录下输入chmod a+x mongobackup //让系统编译它然后，重启mongodb简介 mongobackup 是用于复制集的增量备份与恢复工具，恢复时，需要结合全量备份与恢复使用。增量备份普通备份mongobackup --backup流模式备份mongobackup --backup --stream都可以指定备份初始时间点mongobackup --b...

【Mongodb教程第十课】MongoDB 备份【代码】

MongoDB 数据转储创建备份MongoDB中的数据库，应该使用mongodump命令。此命令将服务器的所有数据转储到转储目录。有许多可供选择，通过它可以限制的数据量或创建备份您的远程服务器。语法:mongodump命令的基本语法如下>mongodump例子启动mongod 服务器。假设服务器上运行 mongod localhost 端口为 27017。现在打开一个命令提示符并进入 MongoDB实例的bin目录，然后键入命令 mongodump考虑以下数据mycol集合。>mongodump该命令将连接...

Linux系统中备份和恢复MongoDB数据的教程

版本：mongodb3.2.6备份格式：/data/mongodb/bin/mongodump -h IP --port 端口号 -u 用户 -p 密码-d 数据库名-o 存储路径恢复格式：/mnt/mongodb/bin/mongorestore -h IP --port 端口号 -u 用户名-p密码 -d 数据库名备份的文件夹名/*注意，如果mongodb开启了认证登录，那么需要加参数--authenticationDatabase=admin，因为笔者使用的mongodb开启了认证登录，因此在备份和恢复中都使用了该参数。查看过相关资料，说是开启了认证（...

还原MongoDB dump备份出来的Bson数据【代码】

集合名　　　　数据库名　　备份文件位置　　　　　　　　　mongorestore --collection people --db accounts dump/accounts/people.bson原文：http://www.cnblogs.com/kaysily/p/3557189.html

MongoDB 数据库备份与恢复

1、MongoDB数据库备份 1、语法： mongodump -h dbhost -d dbname -o dbdirectory 参数说明： -h： MongDB所在服务器地址，例如：127.0.0.1，当然也可以指定端口号：127.0.0.1:27017 -d：需要备份的数据库实例，例如：test -o：备份的数据存放位置，例如：/home/mongodump/，当然该目录需要提前建立，这个目录里面存放该数据库实例的备份数据。 2、实例： sudo rm -...

MongoDB备份恢复与导出导入【图】

说明：本文所有操作均在win7下的MongoDB3.4.4版本中进行。一、备份与恢复1. 备份：mongodump -h IP --port 端口 -u 用户名 -p 密码 -d数据库 -o 文件路径（将使用某个用户账号将某个mongodb服务器上的某个数据库备份到某个路径下）如果无需指定用户，可以去掉-u和-p；如果导出本机的数据库，可以去掉-h；如果是默认端口，可以去掉--port；如果想导出所有数据库，可以去掉-d。如果只想备份某个集合，应在”-d 数据库”后添加”-c 集...

MongoDB 备份与恢复【代码】

1.1 MongoDB的常用命令mongoexport / mongoimport mongodump / mongorestore　　有以上两组命令在备份与恢复中进行使用。1.1.1 导出工具mongoexportMongodb中的mongoexport工具可以把一个collection导出成JSON格式或CSV格式的文件。可以通过参数指定导出的数据项，也可以根据指定的条件导出数据。该命令的参数如下：参数参数说明-h指明数据库宿主机的IP-u指明数据库的用户名-p指明数据库的密码-d指明数据库的名字-c指明coll...