mongodb backup and restore

本文涉及的产品
云数据库 MongoDB,独享型 2核8GB
推荐场景:
构建全方位客户视图
简介:

一、mongodb的冷备

mongodb的冷备就是:复制库的相关文件。因此在冷备前,要关闭服务器,本全中使用平滑关闭server的命令。

>use admin  

>db.shutdownServer() 

或者可以通过fsync方式使MongoDB将数据写入缓存中,然后再复制备份

>use admin  

>db.runCommand({"fsync":1,"lock":1})


锁库后执行插入数据命令,发现无任何反应。备份完后,要解锁(防止这个时候停电或其它原因,导致未缓存中的数据丢失)。

>use admin  

>db.$cmd.sys.unlock.findOne()  

>db.currentOp() 

如果currentOp 只返回{"inprog":[]}结果,说明解锁成功。 解锁后,数据才会成功写入数据库。

解锁也可以使用以下命令:

>use admin

>db.fsyncUnlock()


二、mongodb的热备

    可以在不停止服务的情况下,使用MongoDB提供的两个工具来实现备份和恢复。这个两个工具在MongoDBbin目录下可以看到:mongodump/mongorestor

1、常用命令格

    mongodump -h IP --port PORT -u UserName -p Password -d DB_name -c Collection_Name  -o BackupPath 

    如果不指定用户,可以去掉-u-p;省略-h,默认导出本机的数据库;省略- -port默认端口27017;省略-d默认导出所有数据库。

2、导出所有数据库

    [root@localhost mongodb]# mongodump -h 127.0.0.1 -o /home/user01/backup/ 

3导出指定数据库

    [root@localhost mongodb]# mongodump -h 192.168.1.108 -d tank -o /home/user01/backup 


mongorestore还原数据库

1常用命令格式

    mongorestore -h IP --port PORT -u UserName -p Password -d DB_Name -c Collection_Name  --drop BackupPath_Or_FileName

    --drop的意思是,先删除所有的记录,然后恢复。

2恢复所有数据库到mongodb

    [root@localhost mongodb]# mongorestore /home/user01/backup/  #这里的路径是所有库的备份路径

3还原指定的数据库

    [root@localhost mongodb]# mongorestore -d tank /home/user01/backup/tank/  #tank这个数据库的备份路径 

    [root@localhost mongodb]# mongorestore -d tank_new /home/user01/backup/tank/  #tank还有tank_new数据库中

    这二个命令,可以实现数据库的备份与还原,文件格式是jsonbson的。无法指写到表备份或者还原。


mongoexport导出表,或者表中部分字段

1常用命令格式

    mongoexport -h IP --port 端口 -u 用户名 -p 密码 -d 数据库 -c 表名 -f 字段 -q 条件导出 --csv -o 文件名 

    上面的参数好理解,重点说一下:

-f    导出指字段,以字号分割,-f name,email,age导出name,email,age这三个字段

-q    可以根查询条件导出,-q '{ "uid" : "100" }' 导出uid100的数据

--csv 表示导出的文件格式为csv的,这个比较有用,因为大部分的关系型数据库都是支持csv,在这里有共同点

2导出整张表

    [root@localhost mongodb]# mongoexport -d tank -c users -o /home/user01/backup/tank/users.dat 

3导出表中部分字段

    [root@localhost mongodb]# mongoexport -d tank -c users --csv -f uid,name,sex -o tank/users.csv 

4根据条件敢出数据

    [root@localhost mongodb]# mongoexport -d tank -c users -q '{uid:{$gt:1}}' -o tank/users.json 


五、mongoimport导入表,或者表中部分字段

1、常用命令格式

    1),还原整表导出的非csv文件

    mongoimport -h IP --port 端口 -u 用户名 -p 密码 -d 数据库 -c 表名 --upsert --drop 文件名  

    重点说一下--upsert,其他参数上面的命令已有提到,--upsert 插入或者更新现有数据

    2),还原部分字段的导出文件

    mongoimport -h IP --port 端口 -u 用户名 -p 密码 -d 数据库 -c 表名 --upsertFields 字段 --drop 文件名  

    --upsertFields根--upsert一样

    3),还原导出的csv文件

    mongoimport -h IP --port 端口 -u 用户名 -p 密码 -d 数据库 -c 表名 --type 类型 --headerline --upsert --drop 文件名  

    上面三种情况,还可以有其他排列组合的。

2、还原导出的表数据

    [root@localhost mongodb]# mongoimport -d tank -c users --upsert tank/users.dat 

3、部分字段的表数据导入

    [root@localhost mongodb]# mongoimport -d tank -c users  --upsertFields uid,name,sex  tank/users.dat  

4、还原csv文件

    [root@localhost mongodb]# mongoimport -d tank -c users --type csv --headerline --file tank/users.csv 


六、实例

[root@meteor ~]# mkdir backup

[root@meteor ~]# mongodump -h localhost --port 27027 -d person -o backup/ -u person -p 123

2016-08-04T10:09:36.701+0800writing person.p1 to

2016-08-04T10:09:36.701+0800done dumping person.p1 (1 document)

[root@meteor ~]# ls backup/person/

p1.bson  p1.metadata.json

[root@meteor ~]# mongo localhost:27027/admin -u admin -p

MongoDB shell version: 3.2.8

Enter password:

connecting to: localhost:27027/admin

> use person

switched to db person

show collections

p1

db.p1.drop()

true

show collections

exit

bye

[root@meteor ~]# mongorestore -h localhost --port 27027 -d person backup/person/ -u person -p 123

2016-08-04T10:11:42.234+0800building a list of collections to restore from backup/person dir

2016-08-04T10:11:42.235+0800reading metadata for person.p1 from backup/person/p1.metadata.json

2016-08-04T10:11:42.256+0800restoring person.p1 from backup/person/p1.bson

2016-08-04T10:11:42.268+0800restoring indexes for collection person.p1 from metadata

2016-08-04T10:11:42.268+0800finished restoring person.p1 (1 document)

2016-08-04T10:11:42.268+0800done

[root@meteor ~]#

[root@meteor ~]# mongo localhost:27027/person -u person -p 123

MongoDB shell version: 3.2.8

connecting to: localhost:27027/person

show collections

p1

> db.p1.find()

{ "_id" : ObjectId("57a2a28aa6d4803a1c952529"), "name" : "thompson", "gender" : "male", "age" : "24" }

[root@meteor ~]# rm backup/* -rf

[root@meteor ~]# mongoexport -h localhost --port 27027 -u person -p 123 -d person -c p1 -o backup/person.p1.dat

2016-08-04T10:22:06.773+0800connected to: localhost:27027

2016-08-04T10:22:06.773+0800exported 1 record

[root@meteor ~]# mongoimport -h localhost --port 27027 -u person -p 123 -d person -c p2 --upsert backup/person.p1.dat

2016-08-04T10:25:16.414+0800connected to: localhost:27027

2016-08-04T10:25:16.434+0800imported 1 document

[root@meteor ~]# mongo localhost:27027/person -u person -p 123

MongoDB shell version: 3.2.8

connecting to: localhost:27027/person

show collections

p1

p2

db.p2.find()

{ "_id" : ObjectId("57a2a28aa6d4803a1c952529"), "name" : "thompson", "gender" : "male", "age" : "24" }

db.p1.find()

{ "_id" : ObjectId("57a2a28aa6d4803a1c952529"), "name" : "thompson", "gender" : "male", "age" : "24" }

{ "_id" : ObjectId("57a2a9c43f2b617cfdd64c63"), "name" : "eric", "gender" : "female", "age" : 18 }

{ "_id" : ObjectId("57a2bfe38381eac036252b7c"), "name" : "test1", "gender" : "male", "age" : 20 }

> exit

bye

[root@meteor ~]# rm -rf backup/* ; ls backup/

[root@meteor ~]# mongodump -h localhost --port 27027 -d person -o backup/ -u person -p 123    备份时备份整个库中的所有表

2016-08-04T12:36:36.321+0800writing person.p1 to

2016-08-04T12:36:36.321+0800writing person.p2 to

2016-08-04T12:36:36.322+0800done dumping person.p1 (3 documents)

2016-08-04T12:36:36.322+0800done dumping person.p2 (1 document)

[root@meteor ~]# ls backup/

person

[root@meteor ~]# ls backup/person/

p1.bson  p1.metadata.json  p2.bson  p2.metadata.json

[root@meteor ~]# mongo localhost:27027/person -u person -p 123

MongoDB shell version: 3.2.8

connecting to: localhost:27027/person

db.p1.drop()

true

db.p2.drop()

true

show collections

> exit

bye

[root@meteor ~]# mongorestore -h localhost --port 27027 -d person -c p1 backup/person/p1.bson -u person -p 123

        注:可以单独恢复指定的表

2016-08-04T12:38:55.541+0800checking for collection data in backup/person/p1.bson

2016-08-04T12:38:55.541+0800reading metadata for person.p1 from backup/person/p1.metadata.json

2016-08-04T12:38:55.560+0800restoring person.p1 from backup/person/p1.bson

2016-08-04T12:38:55.639+0800restoring indexes for collection person.p1 from metadata

2016-08-04T12:38:55.640+0800finished restoring person.p1 (3 documents)

2016-08-04T12:38:55.641+0800done

[root@meteor ~]# mongo localhost:27027/person -u person -p 123

MongoDB shell version: 3.2.8

connecting to: localhost:27027/person

show tables

p1

db.p1.find()

{ "_id" : ObjectId("57a2a9c43f2b617cfdd64c63"), "name" : "eric", "gender" : "female", "age" : 18 }

{ "_id" : ObjectId("57a2bfe38381eac036252b7c"), "name" : "test1", "gender" : "male", "age" : 20 }

{ "_id" : ObjectId("57a2a28aa6d4803a1c952529"), "name" : "thompson", "gender" : "male", "age" : "24" }

exit

bye

[root@meteor ~]











本文转自 meteor_hy 51CTO博客,原文链接:http://blog.51cto.com/caiyuanji/1834498,如需转载请自行联系原作者
相关实践学习
MongoDB数据库入门
MongoDB数据库入门实验。
快速掌握 MongoDB 数据库
本课程主要讲解MongoDB数据库的基本知识,包括MongoDB数据库的安装、配置、服务的启动、数据的CRUD操作函数使用、MongoDB索引的使用(唯一索引、地理索引、过期索引、全文索引等)、MapReduce操作实现、用户管理、Java对MongoDB的操作支持(基于2.x驱动与3.x驱动的完全讲解)。 通过学习此课程,读者将具备MongoDB数据库的开发能力,并且能够使用MongoDB进行项目开发。   相关的阿里云产品:云数据库 MongoDB版 云数据库MongoDB版支持ReplicaSet和Sharding两种部署架构,具备安全审计,时间点备份等多项企业能力。在互联网、物联网、游戏、金融等领域被广泛采用。 云数据库MongoDB版(ApsaraDB for MongoDB)完全兼容MongoDB协议,基于飞天分布式系统和高可靠存储引擎,提供多节点高可用架构、弹性扩容、容灾、备份回滚、性能优化等解决方案。 产品详情: https://www.aliyun.com/product/mongodb
目录
相关文章
|
2月前
|
存储 关系型数据库 MySQL
一个项目用5款数据库?MySQL、PostgreSQL、ClickHouse、MongoDB区别,适用场景
一个项目用5款数据库?MySQL、PostgreSQL、ClickHouse、MongoDB——特点、性能、扩展性、安全性、适用场景比较
|
3月前
|
存储 NoSQL 关系型数据库
非关系型数据库-MongoDB技术(二)
非关系型数据库-MongoDB技术(二)
|
3月前
|
NoSQL 关系型数据库 MongoDB
非关系型数据库-MongoDB技术(一)
非关系型数据库-MongoDB技术(一)
|
1月前
|
NoSQL Cloud Native atlas
探索云原生数据库:MongoDB Atlas 的实践与思考
【10月更文挑战第21天】本文探讨了MongoDB Atlas的核心特性、实践应用及对云原生数据库未来的思考。MongoDB Atlas作为MongoDB的云原生版本,提供全球分布式、完全托管、弹性伸缩和安全合规等优势,支持快速部署、数据全球化、自动化运维和灵活定价。文章还讨论了云原生数据库的未来趋势,如架构灵活性、智能化运维和混合云支持,并分享了实施MongoDB Atlas的最佳实践。
|
2月前
|
NoSQL Cloud Native atlas
探索云原生数据库:MongoDB Atlas 的实践与思考
【10月更文挑战第20天】本文探讨了MongoDB Atlas的核心特性、实践应用及对未来云原生数据库的思考。MongoDB Atlas作为云原生数据库服务,具备全球分布、完全托管、弹性伸缩和安全合规等优势,支持快速部署、数据全球化、自动化运维和灵活定价。文章还讨论了实施MongoDB Atlas的最佳实践和职业心得,展望了云原生数据库的发展趋势。
|
2月前
|
存储 NoSQL MongoDB
MongoDB 数据库引用
10月更文挑战第20天
22 1
|
2月前
|
存储 NoSQL Shell
MongoDB 创建数据库
10月更文挑战第12天
72 4
|
2月前
|
存储 NoSQL MongoDB
基于阿里云数据库MongoDB版,微财数科“又快又稳”服务超7000万客户
选择MongoDB主要基于其灵活的数据模型、高性能、高可用性、可扩展性、安全性和强大的分析能力。