**概念**
什么叫做主从复制?Redis主从复制实际上就是将主Redis服务器的数据,复制到其他从Redis服务器去进行存储,默认情况下每台Redis服务器都是主节点,一个主节点可以拥有多个从节点,但是每个从节点只能设置一个主节点。数据复制是单向复制,只能从主节点复制到从节点中存储。在主节点中不需要进行特殊的配置,而只需要在从节点添加slaveof指令:
* slaveof
在从节点的配置文件中通过slaveof指令可以设置该从节点拥有的主节点。
**开启主从复制方式**
在从节点中配置slaveof指令一共有三种方式:
* 在redis.conf配置文件中配置:在配置文件中加入:slaveof 。
* 从节点启动命令添加slaveof参数:在reids启动命令后加上 --slaveof 。
* 从节点Redis启动成功执行slaveof命令:slaveof 。
**主从复制的作用**
* 数据冗余:可以实现数据热备份,在Redis持久化的基础上进一步对数据备份进行优化。
* 故障恢复:当主节点硬盘持久化出现问题,可以快速从从节点提供服务,实现数据恢复。
* 读写分离:可以主节点负责所有写操作,从节点负责所有读操作,实现Redis读写分离提高服务器负载能力。
* 负载均衡:主从复制配合实现读写分离,可以减轻服务器负载,实现负载均衡。
* 高可用:主从复制是实现集群的基础,所以高并发下主从配置是必不可少的配置之一。
**主从复制三大阶段**
主从复制主要分为3个大阶段:准备阶段、数据同步阶段、命令传输阶段。
**准备阶段**
**保存主节点信息**
从节点服务器中存在两个字段:masterhost和masterport。masterhost字段用于存储主节点的ip信息,masterport用于存储主节点的端口号信息,实际上就是我们通过slaveof指令设置的信息。
**主节点与从节点建立socket连接**
成功执行slaveof指令,从节点会每秒1次定时调用replicationCron()函数,寻找是否可以连接主节点,当发现存在新的主节点时,便通过上一步维护的ip与port尝试与该主节点建立socket连接。当主节点与从节点成功建立socket连接,从节点会建立一个ssocket套接字,专门负责接受主节点发送的复制数据命令。而主节点同时也会为该从节点创建相应的客户端状态。
**发送ping命令**
通过上一步,从节点就成功的成为主节点的一个客户端。可以通过发送ping请求进行第一次请求,第一次请求的目的不是为了复制数据,而是为了检查刚才创建的socket连接是否可用以及主节点是否可以能够正常处理请求。从节点向主节点发送ping命令一般会有三种响应结果:
* 返回pong:表示socket连接可用,可以继续操作。
* 超时未返回:表示socket不可用,则从节点断开socket连接。
* 返回其他结果:代表主节点目前处于忙碌状态无法处理从节点请求,则从节点断开socket连接。
**权限验证**
如果主节点配置了requirepass参数,则表示需要权限验证,从节点必须配置masterauth参数,masterauth参数配置成与主节点requirepass参数一致,才可以通过验证。否则权限验证失败,从节点断开socket连接。
**数据同步阶段**
准备工作结束后,便可以进行数据同步。首次数据复制,主节点会将所有数据发送给子节点,也就是全量复制,所以这部分是耗时操作。非首次数据同步,则会根据主节点和从节点当前状态的不同,选择全量复制或者不分肤质。在本阶段,主节点需要主动向从节点发送请求完成复制。
**数据全量复制**
主节点收到全量复制的请求后,fork出一个后台进程,将数据库快照生成RDB文件,并且将生成过程中接受到的写请求暂时缓存,否则会影响数据一致性。然后在RDB文件生成之后将RDB文件发送给从节点,从节点先清除旧数据,然后接收RDB文件更新数据,最后主节点将缓存的写命令全部发送给从节点,从节点执行写命令,最终保持和主节点的数据一致性。
**部分复制**
因为进行全量复制要fork子进程并且进行RDB持久化会极度消耗CPU,而且发送RDB文件给从节点也会对网络带宽造成影响,所以全量复制实际效率并不高,所以可以使用部分复制对数据进行主从复制。进行部分复制时,主节点和从节点会分别维护一个offset变量来存储主节点传递给从节点的字节数,通过offset可以判断主从节点数据是否一致,若不一致可以从从节点所在的offset字节数然后在主节点的offset轻松找到缺少的数据进行部分复制。但是进行部分复制最关键的一点就是必须为非首次复制,主从节点首次复制必须为全量复制过程。
**命令传输阶段**
当主节点将当前数据同步给从节点后,复制的建立流程就完成了。只要从节点不关闭主从复制,则主节点会不断的把写命令发送给从节点,保证主从数据的一致性。命令传输阶段是异步操作,所以可能存在一定程度的延迟,无法保证数据的实时一致性。
- 前言
- 读者须知
- 第一章 Linux
- HTTP
- 简介
- 状态码
- 特点
- URL
- Request
- Response
- 请求方式
- 工作原理
- 生命周期
- GET和POST区别
- 组成
- 端口
- 命令
- 常用命令
- chmod命令详解
- ubuntu apt-get命令
- 用户和用户组
- Nginx
- 四个基本功能
- 进程
- 进程管理[ps命令]
- 进程管理[top命令]
- 进程管理[kill命令]
- 进程管理[进程优先级]
- 进程管理[netstat命令]
- 定时任务
- crontab
- 实现每秒执行
- >/dev/null 2>&1说明
- 文件管理
- 工作管理
- 资源管理
- 第二章 NGINX
- 介绍
- 入门
- 特性
- 安装启动
- 基础必会
- 常用功能
- 反向代理
- 负载均衡
- 正向代理
- HTTP服务器
- 动静分离
- 技能点汇总
- 显示乱码
- 打开目录浏览功能
- 错误码原因和解决方案
- location用法
- 常用正则
- rewrite
- 全局变量
- if语句块
- https
- php后端处理(fast-cgi)
- flag标志位
- 过期功能
- gzip压缩
- 会话保持时间
- 配置nginx worker进程最大打开文件数
- sendfile
- 单个工作进程的最大连接数
- 选择事件驱动模型
- 隐藏ngxin版本号
- 网络连接的优化
- 缓存原理及机制
- 限流
- 日志配置
- 灰度发布
- 配置一键生成
- 第三章 MySQL
- 入门
- 简介
- 术语
- 特点
- 三范式
- 8.0 新特性
- 数据类型
- 数据类型详解
- 常用函数
- 命令速查
- MyISAM与InnoDB区别
- 服务器构成
- 事务
- 本质
- 特性
- 分类
- 隔离级别
- PHP中使用事务实例
- MVCC
- 问题和解决
- 调优原则
- 分布式事务
- 索引
- 简介
- 索引的分类
- 创建索引
- 删除索引
- 哈希索引
- btree索引和hash索引的区别
- 单列索引和多列索引
- 索引优化
- 查看SQL语句对索引的使用情况
- 锁
- 技能点
- 开发规范
- 导入导出数据库
- blob和text的区别
- char与varchar类型区别
- SQL查询语句优化
- 事务隔离和锁操作需要在语言级别来做吗
- 58到家数据库30条军规解读
- 数据迁移
- SKU数据库设计
- RBAC数据库设计
- 第四章 Redis
- 入门
- 简介
- 应用场景
- 安装启动
- 生命周期
- 事务
- 配置项
- 缓存
- 数据持久化
- 安全
- 数据类型
- string
- hash
- list
- set
- zset
- php代码实战
- 字符串缓存实战
- 队列实战
- 发布订阅实战
- 计数器实战
- 排行榜实战
- 字符串悲观锁实战
- 事务的乐观锁实战
- 高级应用
- 分片机制
- 主从复制
- 缓存问题
- 解决 Redis 并发竞争 Key 问题
- 淘汰策略
- 第五章 PHP
- composer
- 什么是composer
- composer常用概念解析
- 使用composer的正确姿势
- 消息队列
- 为何使用消息队列
- Beanstalkd
- PSR规范
- PSR-0
- PSR-1
- PSR-2
- PSR-3
- PSR-4
- OOP基础
- 面向对象概念
- 类和对象
- 类
- 操作对象成员
- this使用
- 构造方法和析构方法
- 封装
- __set(),__get(),__isset(),__unset()四个方法的应用
- 继承
- 重载新的方法(parent::)
- 访问类型(public,protected,private)
- final关键字的应用
- static和const关键字的使用(self::)
- static关键字
- __toString()方法
- 克隆对象__clone()方法
- __call()处理调用错误
- 抽象方法和抽象类(abstract)
- 接口(interface)
- 多态
- 把对象串行化serialize()方法,__sleep()方法,__wakeup()方法
- 自动加载类 __autoload()函数
- OOP进阶
- 语法糖
- 异常处理
- 后期静态绑定
- 后期静态绑定在框架的运用
- 代码优化思路
- Closure(闭包)
- 巧用PHP内置方法
- 数组操作的奇技淫巧
- 设计模式
- 单例模式(Singleton Pattern)
- 工厂模式(Factor Pattern)
- 建造者模式(Builder Pattern)
- 原型模式(Prototype Pattern)
- 适配器模式(Adapter Pattern)
- 装饰器模式(Decorator Pattern)
- 代理模式(Proxy Pattern)
- 外观模式(Facade Pattern)
- 桥接模式(Bridge Pattern)
- 组合模式(Composite Pattern)
- 享元模式 (Flyweight Pattern)
- 策略模式 ( Strategy Pattern )
- 模板模式 (Template Pattern)
- 观察者模式 (observer Pattern)
- 迭代模式(Iterator Pattern)
- 责任链模式(Chain of Responsibility Pattern)
- 命令模式 (Command Pattern)
- 备忘录模式(Memento Pattern)
- 状态模式 (State Pattern)
- 访问者模式(Visitor Pattern)
- 中介者模式(Mediator Pattern)
- 解释器模式(Interpreter Pattern)
- 数据映射模式(Data Mapper Pattern)
- 注册树模式(Registry Pattern)
- 空对象模式(Null Object Pattern)
- 搜索引擎
- Elasticsearch
- 安装
- 入门
- 实践
- 集群
- 查询
- API
- 接口调用
- cURL
- Guzzle
- RPC
- yar
- session
- 概念
- 客户端实现形式
- cookie与session的区别
- Cookies的安全性
- JWT
- 组成
- 入门
- 应用
- 知识点
- 常见
- $_SERVER
- php的引用
- 第六章 技术栈扩展
- 使用第三方静态资源服务
- 七牛对象存储实战
- 七牛对象存储之客户端上传
- aliyunOSS服务端文件上传
- aliyunOSS客户端文件上传
- 第三方支付
- 微信支付
- 支付宝支付
- SEO排名影响因素
- PHP架构师之路
- CTO职能
- web宏观分析
- 常见的企业软件系统
- 负载的优化思路
- 从容应对负载并发的前期准备
- 第七章 网络安全
- XSS
- CSRF
- DDoS
- SQL注入
- 停用js
- 文件上传
- 点击劫持
- APT
- 会话劫持
- 第八章 运维
- devops
- devops简介
- 常用工具
- 搭建运行环境
- Centos7 lnmp环境搭建
- ubuntu lnmp环境搭建
- Apache多站点配置
- docker
- 轻松使用和理解docker
- lnamp产品级环境搭建
- lnamp产品级环境搭建【第二版】
- 基于 Docker 容器的沙盒化评测系统
- vagrant
- vagrant入门
- vagrant之Vagrantfile
- vagrant之集成jenkins
- homestead
- gitlab
- gitlab简介
- webhook
- ssh堡垒机
- 第九章 测试
- 压力测试
- 单元测试
- 第十章 团队协作
- 软件开发模式
- 边做边改模型
- 瀑布模型
- 迭代模型
- 快速原型模型
- 增量模型
- 螺旋模型
- 敏捷软件开发
- 演化模型
- 喷泉模型
- 智能模型
- 混合模型
- 模型对比
- TDD
- git
- git_入门
- git_使用
- git_进阶
- git workflow
- git_高级
- git_小技巧
- okr工作法
- API接口文档管理系统
- 敏捷协作工具
- 第十一章 技术灯塔
- github项目
- 社区好货
- 纸质书
- 第十二章 代码之外
- 面试官的角度看面试
- 程序员的壮年思考