mongodb 备份及恢复

1. 介绍

​ 在Mongodb中我们使用mongodump命令来备份MongoDB数据。该命令可以导出所有数据到指定目录中。mongodump命令可以通过参数指定导出的数据量级转存的服务器。

2. mongodump

​ MongoDB中提供了mongostat 和 mongotop 两个命令来监控MongoDB的运行情况。

​ 语法如下:

>mongodump -h dbhost -d dbname -o dbdirectory

参数解释

-h     指明数据库宿主机的IP
--port 指明数据库的端口 
-u     指明数据库的用户名
-p     指明数据库的密码
-d     指明数据库的名字
-c     指明collection的名字
-o     指明到要导出的文件名
-q     指明导出数据的过滤条件
--authenticationDatabase  验证数据的名称
--gzip 备份时压缩
--oplog use oplog for taking a point-in-time snapshot

快速命令

mkdir full            # 全量备份
mkdir db_cmz          # 单库备份
mkdir db_cmz_col      # 库中表备份
mkdir db_cmz_gzip     # 库备份压缩
mkdir db_cmz_gzip_col # 库中表备份压缩

mongodump -h 127.0.0.1:27017 --authenticationDatabase admin  -o ./full
mongodump -h 127.0.0.1:27017 --authenticationDatabase admin  -d cmz -o ./db_cmz/
mongodump -h 127.0.0.1:27017 --authenticationDatabase admin  -d cmz -c col -o ./db_cmz_col
mongodump -h 127.0.0.1:27017 --authenticationDatabase admin  -d cmz -o ./db_cmz_gzip/ --gzip
ongodump -h 127.0.0.1:27017 --authenticationDatabase admin  -d cmz -c col -o ./db_cmz_gzip_col/ --gzip

2.0 准备

[root@leco app]# mkdir full            # 全量备份
[root@leco app]# mkdir db_cmz          # 单库备份
[root@leco app]# mkdir db_cmz_col      # 库中表备份
[root@leco app]# mkdir db_cmz_gzip     # 库备份压缩
[root@leco app]# mkdir db_cmz_gzip_col # 库中表备份压缩

> use cmz
switched to db cmz
> show tables;
col
col2
col3
test
> db.col.find()
{ "_id" : ObjectId("5c76214dfec6d367f28a65db"), "title" : "Books 教程", "description" : "Java 是由Sun Microsystems公司于1995年5月推出的高级程序设计语言。", "by" : "cmz", "url" : "https://caimengzhi.github.io/books", "tags" : [ "Java", "database", "web" ], "likes" : 200 }
{ "_id" : ObjectId("5c76214dfec6d367f28a65dc"), "title" : "Books 教程", "description" : "Python 语言是最近比较流行的语言", "by" : "cmz", "url" : "https://caimengzhi.github.io/books", "tags" : [ "Python", "database", "web" ], "likes" : 150 }
{ "_id" : ObjectId("5c76214efec6d367f28a65dd"), "title" : "Books 教程", "description" : "MongoDB 是一个 Nosql 数据库", "by" : "cmz", "url" : "https://caimengzhi.github.io/books", "tags" : [ "mongodb", "database", "NoSQL" ], "likes" : 100 }
{ "_id" : ObjectId("5c7632efeb4ea775e2693743"), "description" : "Java 是由Sun Microsystems公司于1995年5月推出的高级程序设计语言。", "url" : "https://caimengzhi.github.io/books" }
{ "_id" : ObjectId("5c7632efeb4ea775e2693744"), "description" : "Python 语言是最近比较流行的语言", "url" : "https://caimengzhi.github.io/books" }
{ "_id" : ObjectId("5c7632efeb4ea775e2693745"), "description" : "MongoDB 是一个 Nosql 数据库", "url" : "https://caimengzhi.github.io/books" }

2.1 全库备份

[root@leco app]# mongodump -h 127.0.0.1:27017 --authenticationDatabase admin  -o ./full
2019-07-27T15:11:23.080+0800    writing admin.system.version to
2019-07-27T15:11:23.095+0800    done dumping admin.system.version (1 document)
2019-07-27T15:11:23.095+0800    writing cmz.col to
2019-07-27T15:11:23.095+0800    writing cmz.col2 to
2019-07-27T15:11:23.095+0800    writing cmz.test to
2019-07-27T15:11:23.095+0800    writing cmz.col3 to
2019-07-27T15:11:23.099+0800    done dumping cmz.col (6 documents)
2019-07-27T15:11:23.099+0800    done dumping cmz.col2 (5 documents)
2019-07-27T15:11:23.100+0800    done dumping cmz.test (1 document)
2019-07-27T15:11:23.100+0800    done dumping cmz.col3 (0 documents)
[root@leco app]# ls ./full/
admin  cmz

2.2 备份cmz库

[root@leco app]# mongodump -h 127.0.0.1:27017 --authenticationDatabase admin  -d cmz -o ./db_cmz/
2019-07-27T15:12:44.375+0800    writing cmz.col to
2019-07-27T15:12:44.377+0800    writing cmz.col2 to
2019-07-27T15:12:44.377+0800    writing cmz.test to
2019-07-27T15:12:44.378+0800    writing cmz.col3 to
2019-07-27T15:12:44.379+0800    done dumping cmz.col (6 documents)
2019-07-27T15:12:44.380+0800    done dumping cmz.col2 (5 documents)
2019-07-27T15:12:44.380+0800    done dumping cmz.test (1 document)
2019-07-27T15:12:44.381+0800    done dumping cmz.col3 (0 documents)
[root@leco app]# ls db_cmz
cmz
[root@leco app]# ls db_cmz/cmz/
col2.bson  col2.metadata.json  col3.bson  col3.metadata.json  col.bson  col.metadata.json  test.bson  test.metadata.json

2.3 备份cmz库下的col集合

[root@leco app]# mongodump -h 127.0.0.1:27017 --authenticationDatabase admin  -d cmz -c col -o ./db_cmz_col
2019-07-27T15:13:15.706+0800    writing cmz.col to
2019-07-27T15:13:15.707+0800    done dumping cmz.col (6 documents)
[root@leco app]# ls db_cmz
db_cmz/          db_cmz_col/      db_cmz_gzip/     db_cmz_gzip_col/
[root@leco app]# ls db_cmz_col/
cmz
[root@leco app]# ls db_cmz_col/cmz/
col.bson  col.metadata.json

2.4 压缩备份库

[root@leco app]# mongodump -h 127.0.0.1:27017 --authenticationDatabase admin  -d cmz -o ./db_cmz_gzip/ --gzip
2019-07-27T15:13:53.005+0800    writing cmz.col to
2019-07-27T15:13:53.005+0800    writing cmz.col2 to
2019-07-27T15:13:53.005+0800    writing cmz.test to
2019-07-27T15:13:53.005+0800    writing cmz.col3 to
2019-07-27T15:13:53.008+0800    done dumping cmz.col (6 documents)
2019-07-27T15:13:53.009+0800    done dumping cmz.col2 (5 documents)
2019-07-27T15:13:53.011+0800    done dumping cmz.test (1 document)
2019-07-27T15:13:53.012+0800    done dumping cmz.col3 (0 documents)
[root@leco app]# ls db_cmz_gzip
db_cmz_gzip/     db_cmz_gzip_col/
[root@leco app]# ls db_cmz_gzip/cmz/
col2.bson.gz  col2.metadata.json.gz  col3.bson.gz  col3.metadata.json.gz  col.bson.gz  col.metadata.json.gz  test.bson.gz  test.metadata.json.gz

2.5 压缩备份单表

[root@leco app]# mongodump -h 127.0.0.1:27017 --authenticationDatabase admin  -d cmz -c col -o ./db_cmz_gzip_col/ --gzip
2019-07-27T15:14:26.475+0800    writing cmz.col to
2019-07-27T15:14:26.476+0800    done dumping cmz.col (6 documents)
[root@leco app]# ls db_cmz_gzip_col/cmz/
col.bson.gz  col.metadata.json.gz

3. mongorestore

​ mongodb使用 mongorestore 命令来恢复备份的数据。

mongorestore -h <hostname><:port> -d dbname <path>

参数解释

--host <:port>, -h <:port>:ongoDB所在服务器地址,默认为: localhost:27017
-h 指明数据库宿主机的IP
-u 指明数据库的用户名
-p 指明数据库的密码
-d 指明数据库的名字
-c 指明collection的名字
-o 指明到要导出的文件名
-q 指明导出数据的过滤条件
--authenticationDatabase 验证数据的名称
--gzip 备份时压缩
--oplog use oplog for taking a point-in-time snapshot
--drop 恢复的时候把之前的集合drop掉

3.1 整个恢复

3.3.1 全库备份中恢复单库

[root@leco app]# mongorestore -h 127.0.0.1:27017 --authenticationDatabase admin  --drop  ./full
2019-07-27T15:16:24.608+0800    preparing collections to restore from
2019-07-27T15:16:24.656+0800    reading metadata for cmz.col from full/cmz/col.metadata.json
2019-07-27T15:16:24.661+0800    reading metadata for cmz.col3 from full/cmz/col3.metadata.json
2019-07-27T15:16:24.670+0800    reading metadata for cmz.test from full/cmz/test.metadata.json
2019-07-27T15:16:24.681+0800    reading metadata for cmz.col2 from full/cmz/col2.metadata.json
2019-07-27T15:16:24.707+0800    restoring cmz.col from full/cmz/col.bson
2019-07-27T15:16:24.724+0800    restoring cmz.col3 from full/cmz/col3.bson
2019-07-27T15:16:24.725+0800    no indexes to restore
2019-07-27T15:16:24.725+0800    finished restoring cmz.col3 (0 documents)
2019-07-27T15:16:24.741+0800    restoring cmz.test from full/cmz/test.bson
2019-07-27T15:16:24.756+0800    restoring cmz.col2 from full/cmz/col2.bson
2019-07-27T15:16:24.768+0800    no indexes to restore
2019-07-27T15:16:24.768+0800    finished restoring cmz.test (1 document)
2019-07-27T15:16:24.768+0800    no indexes to restore
2019-07-27T15:16:24.768+0800    finished restoring cmz.col (6 documents)
2019-07-27T15:16:24.768+0800    no indexes to restore
2019-07-27T15:16:24.768+0800    finished restoring cmz.col2 (5 documents)
2019-07-27T15:16:24.768+0800    done

4. mongoexport

​ Mongodb中的mongoexport工具可以把一个collection导出成JSON格式或CSV格式的文件。可以通过参数指定导出的数据项,也可以根据指定的条件导出数据。

mongoexport -h IP --port 端口 -u 用户名 -p 密码 -d 数据库 -c 表名 -f 字段 -q 条件导出 --csv -o 文件名

参数解释

-h 指明数据库宿主机的IP
-u 指明数据库的用户名
-p 指明数据库的密码
-d 指明数据库的名字
-c 指明collection的名字
-f 指明要导出那些列,以逗号分割,-f uid,name,age导出uid,name,age这三个字段
-o 指明到要导出的文件名
-q 指明导出数据的过滤条件,-q '{ "uid" : "100" }' 导出uid为100的数据
--type 指定文件类型
--authenticationDatabase 验证数据的名称

4.1 导出整张表

[root@leco bak]# mongoexport -d cmz -c col -o ./col.dat
2019-07-27T14:26:12.934+0800    connected to: localhost
2019-07-27T14:26:12.952+0800    exported 3 records
[root@leco bak]# ls
admin  cmz  col.dat
[root@leco bak]# cat col.dat
{"_id":{"$oid":"5c76214dfec6d367f28a65db"},"title":"Books 教程","description":"Java 是由Sun Microsystems公司于1995年5月推出的高级程序设计语言。","by":"cmz","url":"https://caimengzhi.github.io/books","tags":["Java","database","web"],"likes":200.0}
{"_id":{"$oid":"5c76214dfec6d367f28a65dc"},"title":"Books 教程","description":"Python 语言是最近比较流行的语言","by":"cmz","url":"https://caimengzhi.github.io/books","tags":["Python","database","web"],"likes":150.0}
{"_id":{"$oid":"5c76214efec6d367f28a65dd"},"title":"Books 教程","description":"MongoDB 是一个 Nosql数据库","by":"cmz","url":"https://caimengzhi.github.io/books","tags":["mongodb","database","NoSQL"],"likes":100.0}

4.2 导出表中部分字段

[root@leco bak]# mongoexport -d cmz -c col --csv -f description,tags,likes -o ./col.csv
2019-07-27T14:28:16.132+0800    csv flag is deprecated; please use --type=csv instead
2019-07-27T14:28:16.134+0800    connected to: localhost
2019-07-27T14:28:16.145+0800    exported 3 records
[root@leco bak]# cat col.csv
description,tags,likes
Java 是由Sun Microsystems公司于1995年5月推出的高级程序设计语言。,"[""Java"",""database"",""web""]",200
Python 语言是最近比较流行的语言,"[""Python"",""database"",""web""]",150
MongoDB 是一个 Nosql 数据库,"[""mongodb"",""database"",""NoSQL""]",100

4.3 根据条件导出数据

[root@leco bak]# mongoexport -d cmz -c col -q '{likes:{$gt:150}}' -o ./col.json
2019-07-27T14:29:32.399+0800    connected to: localhost
2019-07-27T14:29:32.407+0800    exported 1 record
[root@leco bak]# cat col.json
{"_id":{"$oid":"5c76214dfec6d367f28a65db"},"title":"Books 教程","description":"Java 是由Sun Microsystems公司于1995年5月推出的高级程序设计语言。","by":"cmz","url":"https://caimengzhi.github.io/books","tags":["Java","database","web"],"likes":200.0}

4.4 other

[root@leco back]# mongoexport -h 127.0.0.1:27017 --authenticationDatabase admin -d cmz -c col -o ./col.dat
2019-07-27T14:45:13.623+0800    connected to: 127.0.0.1:27017
2019-07-27T14:45:13.643+0800    exported 3 records
[root@leco back]# ls
col.dat
[root@leco back]# cat col.dat
{"_id":{"$oid":"5c76214dfec6d367f28a65db"},"title":"Books 教程","description":"Java 是由Sun Microsystems公司于1995年5月推出的高级程序设计语言。","by":"cmz","url":"https://caimengzhi.github.io/books","tags":["Java","database","web"],"likes":200.0}
{"_id":{"$oid":"5c76214dfec6d367f28a65dc"},"title":"Books 教程","description":"Python 语言是最近比较流行的语言","by":"cmz","url":"https://caimengzhi.github.io/books","tags":["Python","database","web"],"likes":150.0}
{"_id":{"$oid":"5c76214efec6d367f28a65dd"},"title":"Books 教程","description":"MongoDB 是一个 Nosql数据库","by":"cmz","url":"https://caimengzhi.github.io/books","tags":["mongodb","database","NoSQL"],"likes":100.0}

[root@leco back]# mongoexport -h 127.0.0.1:27017 --authenticationDatabase admin -d cmz -c col  --type=csv -f description,url -o ./col_csv.dat
2019-07-27T14:47:01.048+0800    connected to: 127.0.0.1:27017
2019-07-27T14:47:01.059+0800    exported 3 records
[root@leco back]# cat col_csv.dat
description,url
Java 是由Sun Microsystems公司于1995年5月推出的高级程序设计语言。,https://caimengzhi.github.io/books
Python 语言是最近比较流行的语言,https://caimengzhi.github.io/books
MongoDB 是一个 Nosql 数据库,https://caimengzhi.github.io/books

5. mongoimport

​ Mongodb中的mongoimport工具可以把一个特定格式文件中的内容导入到指定的collection中。该工具可以导入JSON格式数据,也可以导入CSV格式数据。

参数解释

-h 指明数据库宿主机的IP
-u 指明数据库的用户名
-p 指明数据库的密码
-d 指明数据库的名字
-c 指明collection的名字
-f 指明要导出那些列
-o 指明到要导出的文件名
-q 指明导出数据的过滤条件
--drop 插入之前先删除原有的
--headerline 指明第一行是列名,不需要导入。
-j 同时运行的插入操作数(默认为1),并行
--authenticationDatabase 验证数据的名称

5.1 恢复导出的表数据

[root@leco back]# mongoimport -h  127.0.0.1:27017 --authenticationDatabase admin  -d cmz -c col  --drop ./col.dat
2019-07-27T14:48:38.415+0800    connected to: 127.0.0.1:27017
2019-07-27T14:48:38.416+0800    dropping: cmz.col
2019-07-27T14:48:38.497+0800    imported 3 documents

5.2 部分字段的表数据导入

mongoimport -d cmz -c col --upsertFields description,tags,likes  ./col.dat

5.3 恢复csv文件

[root@leco back]# mongoimport -h  127.0.0.1:27017 --authenticationDatabase admin -d cmz -c col --type=csv --headerline --file ./col_csv.dat
2019-07-27T14:49:19.561+0800    connected to: 127.0.0.1:27017
2019-07-27T14:49:19.563+0800    imported 3 documents
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 203,271评论 5 476
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,275评论 2 380
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 150,151评论 0 336
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,550评论 1 273
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,553评论 5 365
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,559评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,924评论 3 395
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,580评论 0 257
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,826评论 1 297
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,578评论 2 320
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,661评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,363评论 4 318
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,940评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,926评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,156评论 1 259
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 42,872评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,391评论 2 342

推荐阅读更多精彩内容

  • Mongodb的安装及使用(一)Mongodb 与 python 的交互(二)mongodb数据库备份和恢复(三)...
    程猿先生阅读 3,089评论 1 0
  • 什么是Mongodb数据库? MongoDB 是由C++语言编写的,是一个基于分布式文件存储的开源数据库系统 Mo...
    瘦不下去了阅读 666评论 0 0
  • mongodump:在MongoDB中我们使用mongodump命令来备份MongoDB数据。该命令可以导出所有数...
    米刀灵阅读 980评论 0 0
  • 逻辑结构 系统准备 mongodb安装 环境变量 启动mongodb 登录mongodb 配置文件 mongodb...
    子牙阅读 477评论 0 0
  • Mongodb 配置选项 通常在mongod.conf中 配置文件 设置了配置文件后启动时以自定义的配置文件启动:...
    AkaTBS阅读 1,071评论 0 6