[TOC]
## 一 备份恢复工具介绍
mongodb有两款备份恢复工具,分别是
* mongoexport/mongoimport
导入/导出的是JSON格式或者CSV格式
* mongodump/mongorestore
导入/导出的是BSON格式。
### 两种格式区别
JSON可读性强但体积较大,BSON则是二进制文件,体积小但对人类几乎没有可读性。
* json的优劣:
JSON虽然具有较好的跨版本通用性,但其只保留了数据部分,不保留索引,账户等其他基础信息。使用时应该注意。
* bson的优劣
BSON格式可能会随mongodb版本不同而有所不同,所以不同版本之间用mongodump/mongorestore可能不会成功
当无法使用BSON进行跨版本的数据迁移的时候,可使用JSON格式
## 二 JSON格式工具使用
### A 导出工具mongoexport
Mongodb中的mongoexport工具可以把一个collection导出成JSON格式或CSV格式的文件。
可以通过参数指定导出的数据项,也可以根据指定的条件导出数据。
**mongoexport参数说明**
```
$ mongoexport --help
-h:指明数据库宿主机的IP
-u:指明数据库的用户名
-p:指明数据库的密码
-d:指明数据库的名字
-c:指明collection的名字
-f:指明要导出那些列
-o:指明到要导出的文件名
-q:指明导出数据的过滤条件
--authenticationDatabase admin
```
**单表备份至json格式**
```sh
mongoexport -uroot -proot123 --port 27017 \
--authenticationDatabase admin -d noah -c log \
-o /tmp/log.json
```
**单表备份至csv格式**
如果我们需要导出CSV格式的数据,则需要使用----type=csv参数:需要制定导出的列名
```
mongoexport -uroot -proot123 --port 27017 \
--authenticationDatabase admin -d noah -c log \
--type=csv -f uid,name,age,date \
-o /tmp/log.csv
```
### B 导入工具mongoimport
Mongodb中的mongoimport工具可以把一个特定格式文件中的内容导入到指定的collection中。
该工具可以导入JSON格式数据,也可以导入CSV格式数据。具体使用如下所示:
**mongoimport 参数说明**
```
$ mongoimport --help
参数说明:
-h:指明数据库宿主机的IP
-u:指明数据库的用户名
-p:指明数据库的密码
-d:指明数据库的名字
-c:指明collection的名字
-f:指明要导入那些列
-j, --numInsertionWorkers=<number> (defaults to 1) //并行备份
```
**恢复json格式表数据到log1**
```
mongoimport -uroot -proot123 --port 27017 \
--authenticationDatabase admin -d noah \
-c log1 /tmp/log.json
```
**恢复csv格式的文件到log2**
如果要导入CSV格式文件中的内容,则需要通过--type参数指定导入格式,具体如下所示:
```
#csv格式的文件头行,有列名字
mongoimport -uroot -proot123 --port 27017 \
--authenticationDatabase admin -d noah \
-c log2 --type=csv --headerline --file /tmp/log.csv
##--headerline:指明第一行是列名,不需要导入。
#csv格式的文件头行,没有列名字
mongoimport -uroot -proot123 --port 27017 \
--authenticationDatabase admin -d oldboy \
-c log3 --type=csv -f id,name,age,date --file /tmp/log1.csv
```
### C 异构平台迁移案例
mysql -----> mongodb
world数据库下city表进行导出,导入到mongodb
1. mysql开启安全路径
```sh
添加以下配置
vim /etc/my.cnf
secure-file-priv=/tmp
#重启数据库生效
/etc/init.d/mysqld restart
```
2. 导出mysql的city表数据
```sh
source /root/world.sql
select * from world.city into outfile '/tmp/city1.csv' fields terminated by ',';
```
3. 处理备份文件
```
desc world.city
ID | int(11) | NO | PRI | NULL | auto_increment |
| Name | char(35) | NO | | | |
| CountryCode | char(3) | NO | MUL | | |
| District | char(20) | NO | | | |
| Population
#添加第一行列名信息
vim /tmp/city.csv
ID,Name,CountryCode,District,Population
```
4. 在mongodb中导入备份
```
mongoimport -uroot -proot123 --port 27017 \
--authenticationDatabase admin -d world \
-c city --type=csv ID,Name,CountryCode,District,Population --file /tmp/city1.csv
use world
db.city.find({CountryCode:"CHN"});
```
## 三 BSON格式工具使用
### A mongodump和mongorestore介绍
mongodump能够在Mongodb运行时进行备份,是对运行的Mongodb做查询,然后将所有查到的文档写入磁盘。
如果我们在备份时对数据库进行了写入操作,就可能存在备份数据不一定是数据库的实时快照的问题,
另外在备份时可能会对其它客户端性能产生不利的影响。
### B mongodump参数说明:
```
$ mongodump --help
-h:指明数据库宿主机的IP
-u:指明数据库的用户名
-p:指明数据库的密码
-d:指明数据库的名字
-c:指明collection的名字
-o:指明到要导出的文件名
-q:指明导出数据的过滤条件
-j, --numParallelCollections=<number> (defaults to 4) //并行备份
```
### C mongodump备份工具
```sh
# 1全库备份
mongodump -uroot -proot123 --port 27017 \
--authenticationDatabase admin -o /tmp/backup
# 2备份world库
mongodump -uroot -proot123 --port 27017 \
--authenticationDatabase admin -d world -o /tmp/backup/
# 3备份noah库下的log集合
mongodump -uroot -proot123 --port 27017 \
--authenticationDatabase admin -d noah -c log -o /tmp/backup/
# 4压缩备份
mongodump -uroot -proot123 --port 27017 \
--authenticationDatabase admin -d noah -o /tmp/backup/ --gzip
mongodump -uroot -proot123 --port 27017 \
--authenticationDatabase admin -d app -c vast -o /tmp/backup/ --gzip
```
### D mongorestore恢复工具
```sh
# 1恢复world库
mongorestore -uroot -proot123 --port 27017 \
--authenticationDatabase admin -d world1 /tmp/backup/world
# 2恢复oldguo库下的t1集合
mongorestore -uroot -proot123 --port 27017 \
--authenticationDatabase admin -d noah -c log1 --gzip /tmp/backup/noah/log.bson
# 3drop表示恢复的时候把之前的集合drop掉
mongorestore -uroot -proot123 --port 27017 \
--authenticationDatabase admin -d noah --drop /tmp/backup/noah
```
- shell编程
- 变量1-规范-环境变量-普通变量
- 变量2-位置-状态-特殊变量
- 变量3-变量子串
- 变量4-变量赋值三种方法
- 变量5-数组相关
- 计算1-数值计算命令和案例
- 计算2-expr命令举例
- 计算3-条件表达式和各种操作符
- 计算4-条件表达式和操作符案例
- 循环1-函数的概念与作用
- 循环2-if与case语法
- 循环3-while语法
- 循环4-for循环
- 其他1-判断传入的参数为0或整数的多种思路
- 其他2-while+read按行读取文件
- 其他3-给输出内容加颜色
- 其他4-shell脚本后台运行知识
- 其他5-6种产生随机数的方法
- 其他6-break,continue,exit,return区别
- if语法案例
- case语法案例
- 函数语法案例
- WEB服务软件
- nginx相关
- 01-简介与对比
- 02-日志说明
- 03-配置文件和虚拟主机
- 04-location模块和访问控制
- 05-status状态模块
- 06-rewrite重写模块
- 07-负载均衡和反向代理
- 08-反向代理监控虚拟IP地址
- nginx与https自签发证书
- php-nginx-mysql联动
- Nginx编译安装[1.12.2]
- 案例
- 不同客户端显示不同信息
- 上传和访问资源池分离
- 配置文件
- nginx转发解决跨域问题
- 反向代理典型配置
- php相关
- C6编译安装php.5.5.32
- C7编译php5
- C6/7yum安装PHP指定版本
- tomcxat相关
- 01-jkd与tomcat部署
- 02-目录-日志-配置文件介绍
- 03-tomcat配置文件详解
- 04-tomcat多实例和集群
- 05-tomcat监控和调优
- 06-Tomcat安全管理规范
- show-busy-java-threads脚本
- LVS与keepalived
- keepalived
- keepalived介绍和部署
- keepalived脑裂控制
- keepalived与nginx联动-监控
- keepalived与nginx联动-双主
- LVS负载均衡
- 01-LVS相关概念
- 02-LVS部署实践-ipvsadm
- 03-LVS+keepalived部署实践
- 04-LVS的一些问题和思路
- mysql数据库
- 配置和脚本
- 5.6基础my.cnf
- 5.7基础my.cnf
- 多种安装方式
- 详细用法和命令
- 高可用和读写分离
- 优化和压测
- docker与k8s
- docker容器技术
- 1-容器和docker基础知识
- 2-docker软件部署
- 3-docker基础操作命令
- 4-数据的持久化和共享互连
- 5-docker镜像构建
- 6-docker镜像仓库和标签tag
- 7-docker容器的网络通信
- 9-企业级私有仓库harbor
- docker单机编排技术
- 1-docker-compose快速入门
- 2-compose命令和yaml模板
- 3-docker-compose命令
- 4-compose/stack/swarm集群
- 5-命令补全和资源限制
- k8s容器编排工具
- mvn的dockerfile打包插件
- openstack与KVM
- kvm虚拟化
- 1-KVM基础与快速部署
- 2-KVM日常管理命令
- 3-磁盘格式-快照和克隆
- 4-桥接网络-热添加与热迁移
- openstack云平台
- 1-openstack基础知识
- 2-搭建环境准备
- 3-keystone认证服务部署
- 4-glance镜像服务部署
- 5-nova计算服务部署
- 6-neutron网络服务部署
- 7-horizon仪表盘服务部署
- 8-启动openstack实例
- 9-添加计算节点流程
- 10-迁移glance镜像服务
- 11-cinder块存储服务部署
- 12-cinder服务支持NFS存储
- 13-新增一个网络类型
- 14-云主机冷迁移前提设置
- 15-VXALN网络类型配置
- 未分类杂项
- 部署环境准备
- 监控
- https证书
- python3.6编译安装
- 编译安装curl[7.59.0]
- 修改Redhat7默认yum源为阿里云
- 升级glibc至2.17
- rabbitmq安装和启动
- rabbitmq多实例部署[命令方式]
- mysql5.6基础my.cnf
- centos6[upstart]/7[systemd]创建守护进程
- Java启动参数详解
- 权限控制方案
- app发包仓库
- 版本发布流程
- elk日志系统
- rsyslog日志统一收集系统
- ELK系统介绍及YUM源
- 快速安装部署ELK
- Filebeat模块讲解
- logstash的in/output模块
- logstash的filter模块
- Elasticsearch相关操作
- ES6.X集群及head插件
- elk收集nginx日志(json格式)
- kibana说明-汉化-安全
- ES安装IK分词器
- zabbix监控
- zabbix自动注册模板实现监控项自动注册
- hadoop大数据集群
- hadoop部署
- https证书
- certbot网站
- jenkins与CI/CD
- 01-Jenkins部署和初始化
- 02-Jenkins三种插件安装方式
- 03-Jenkins目录说明和备份
- 04-git与gitlab项目准备
- 05-构建自由风格项目和相关知识
- 06-构建html静态网页项目
- 07-gitlab自动触发项目构建
- 08-pipelinel流水线构建项目
- 09-用maven构建java项目
- iptables
- 01-知识概念
- 02-常规命令实战
- 03-企业应用模板
- 04-企业应用模板[1键脚本]
- 05-企业案例-共享上网和端口映射
- SSH与VPN
- 常用VPN
- VPN概念和常用软件
- VPN之PPTP部署[6.x][7.x]
- 使用docker部署softether vpn
- softEther-vpn静态路由表推送
- SSH服务
- SSH介绍和部署
- SSH批量分发脚本
- 开启sftp日志并限制sftp访问目录
- sftp账号权限分离-开发平台
- ssh配置文件最佳实践
- git-github-gitlab
- git安装部署
- git详细用法
- github使用说明
- gitlab部署和使用
- 缓存数据库
- zookeeper草稿
- mongodb数据库系列
- mongodb基本使用
- mongodb常用命令
- MongoDB配置文件详解
- mongodb用户认证管理
- mongodb备份与恢复
- mongodb复制集群
- mongodb分片集群
- docker部署mongodb
- memcached
- memcached基本概念
- memcached部署[6.x][7.x]
- memcached参数和命令
- memcached状态和监控
- 会话共享和集群-优化-持久化
- memcached客户端-web端
- PHP测试代码
- redis
- 1安装和使用
- 2持久化-事务-锁
- 3数据类型和发布订阅
- 4主从复制和高可用
- 5redis集群
- 6工具-安全-pythonl连接
- redis配置文件详解
- 磁盘管理和存储
- Glusterfs分布式存储
- GlusterFS 4.1 版本选择和部署
- Glusterfs常用命令整理
- GlusterFS 4.1 深入使用
- NFS文件存储
- NFS操作和部署
- NFS文件系统-挂载和优化
- sersync与inotify
- rsync同步服务
- rsyncd.conf
- rsync操作和部署文档
- rsync常见错误处理
- inotify+sersync同步服务
- inotify安装部署
- inotify最佳脚本
- sersync安装部署
- 时间服务ntp和chrony
- 时间服务器部署
- 修改utc时间为cst时间
- 批量操作与自动化
- cobbler与kickstart
- KS+COBBLER文件
- cobbler部署[7.x]
- kickstart部署[7.x]
- kickstar-KS文件和语法解析
- kickstart-PXE配置文件解析
- 自动化之ansible
- ansible部署和实践
- ansible剧本编写规范
- 配置文件示例
- 内网DNS服务
- 压力测试
- 压测工具-qpefr测试带宽和延时