Redis系列之（二）：Redis主从同步，读写分离（转）

1. Redis主从同步

Redis支持主从同步。数据可以从主服务器向任意数量的从服务器上同步，同步使用的是发布/订阅机制。

2. 配置主从同步

Mater Slave的模式，从Slave向Master发起SYNC命令。

可以是1 Master 多Slave，可以分层，Slave下可以再接Slave，可扩展成树状结构。

2.1 配置Mater，Slave

配置非常简单，只需在slave的设定文件中指定master的ip和port

Master： test166

修改设定文件，服务绑定到ip上


1

2

# vi /etc/redis.conf

bind 10.86.255.166

重启Redis

# systemctl restart redis


1

# less /etc/redis.conf

Slave： test167

修改设定文件，指定Master


1

2

3

slaveof <masterip> <masterport>    指定master的ip和port

masterauth <master-password>       master有验证的情况下

slave-read-only yes                设置slave为只读模式

也可以用命令行设定：


1

2

redis 127.0.0.1:9999> slaveof localhost 6379

OK

2.2 同期情况确认

Master：


1

2

3

4

5

6

127.0.0.1:6379> INFO replication

# Replication

role:master

connected_slaves:1

slave0:ip=10.86.255.167,port=6379,state=online,offset=309,lag=1

……

 Slave：


1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

127.0.0.1:6379> INFO replication

# Replication

role:slave

master_host:10.86.255.166

master_port:6379

master_link_status:up

master_last_io_seconds_ago:7

master_sync_in_progress:0

slave_repl_offset:365

slave_priority:100

slave_read_only:1

connected_slaves:0

master_repl_offset:0

repl_backlog_active:0

repl_backlog_size:1048576

repl_backlog_first_byte_offset:0

repl_backlog_histlen:0

同期正常时：

master_link_status:up

master_repl_offset和slave_repl_offset相等，

master_last_io_seconds_ago在10秒内。

2.3 Slave升级为Master

Master不可用的情况下，停止Master，将Slave的设定无效化后，Slave升级为Master


1

2

3

4

5

6

7

redis 127.0.0.1:9999> SLAVEOF NO ONE

 OK

 

redis 127.0.0.1:9999> info

......

role:master

......

2.4 Health Check

Slave按照repl-ping-slave-period的间隔（默认10秒），向Master发送ping。

如果主从间的链接中断后，再次连接的时候，2.8以前按照full sync再同期。2.8以后，因为有backlog的设定，backlog存在master的内存里，重新连接之前，如果redis没有重启，并且offset在backlog保存的范围内，可以实现从断开地方同期，不符合这个条件，还是full sync

 

用monitor命令，可以看到slave在发送ping


1

2

3

127.0.0.1:6379> monitor

OK

1448515184.249169 [0 10.86.255.166:6379] "PING"

2.5 设置Master的写行为

2.8以后，可以在设定文件中设置，Master只有当有N个Slave处于连接状态时，接受写操作


1

2

min-slaves-to-write 3

min-slaves-max-lag 10

3. Redis HA管理工具

redis-sentinel 能监视同期的状态，发现Master down的时候，会进行failover，将Slave升级为Master，启动后会自动更新sentinel设定文件，发生failover时，会自动修改sentinel和redis的设定文件

 

环境：

Master： 10.86.255.167 :6379    sentinel：26379

Slave1： 10.86.255.166 :6379    sentinel：26379

Slave2： 10.86.255.167 :7379    sentinel：36379

Sentinel的设定文件在/etc/redis-sentinel.conf，对failover的动作等可以进行一些定义，本次主要验证Sentinel的动作，设定文件可以根据具体情况自行调整 

3.1 设定Master，Slave

参照上文设定Master，Slave，并确认Mater和2个Slave的同期状态正常

3.2 Master上设定Sentinel


1

2

3

# vi /etc/redis-sentinel.conf

daemonize yes

sentinel monitor mymaster <master ip> 6379 2

启动sentinel


1

2

3

# redis-sentinel /etc/redis-sentinel.conf

或

# redis-server /etc/redis-sentinel.conf --sentinel

确认


1

2

# redis-cli -p 26379

127.0.0.1:26379> INFO sentinel

确认Master信息


1

127.0.0.1:26379> sentinel masters

确认Slave信息


1

127.0.0.1:26379> sentinel slaves mymaster

3.3 Slave上设定Sentinel

在slave1上设定sentinel


1

2

3

# vi /etc/redis-sentinel.conf

daemonize yes

sentinel monitor mymaster <master ip> 6379 2

启动slave1


1

# redis-sentinel /etc/redis-sentinel.conf

在slave2上设定sentinel


1

2

3

4

# less /etc/redis-sentinel_36379.conf

daemonize yes

port 36379

sentinel monitor mymaster <master ip> 6379 2

启动slave2


1

# redis-sentinel /etc/redis-sentinel.conf

3.4 动作确认

停止Master


1

127.0.0.1:6379> SHUTDOWN

确认日志发生fail over


1

# tail /var/log/redis/sentinel.log

确认Slave2变成Master，Slave1是Slave


1

test167:7379> info replication


1

test166:6379> info replication

启动刚才停掉的Master，确认Master变为Slave


1

10.86.255.166:6379> info replication

3.5 Sentinel命令


1

2

3

4

5

6

127.0.0.1:26379> sentinel masters

127.0.0.1:26379> sentinel slaves mymaster

127.0.0.1:26379> SENTINEL get-master-addr-by-name mymaster

127.0.0.1:26379> SENTINEL reset mymaster

127.0.0.1:26379> SENTINEL failover mymaster

127.0.0.1:26379> SENTINEL flushconfig mymaster

4. 后记

本文介绍了Redis主从同步，读写分离，及HA，后续会继续研究Redis。

专注服务器运维十年，欢迎技术上的交流。微信：ee900222 QQ：176539854

http://www.cnblogs.com/ee900222/p/redis_2.html

 

 

时间： 2024-08-30 20:15:41

Redis系列之（二）：Redis主从同步，读写分离（转）的相关文章

MySQL主从同步读写分离的集群配置

大型网站为了解决大量的高并发访问问题,除了在网站实现分布式负载均衡,远远不够.到了数据业务层.数据访问层,如果还是传统的数据结构,或者只是单单靠一台服务器支持,如此多的数据库连接操作,服务器性能再好数据库必然会崩溃.数据丢失的话,后果更是不堪设想.这时候,我们会考虑如何减少数据库的连接,一方面采用优秀的代码框架,进行代码的优化,采用优秀的数据缓存技术如:memcached等.如果资金充足的话,必然会想到假设服务器集群,来分担主数据库的压力.或者在硬件设备上,投入大量资金,购买高性能的服务器.出名

Mysql主从配置+读写分离（转）

   MySQL从5.5版本开始,通过./configure进行编译配置方式已经被取消,取而代之的是cmake工具.因此,我们首先要在系统中源码编译安装cmake工具.   注:安装前须查看是否已经安装了如下依赖包,如果没有请安装. apt-get -y install gcc g++ libncurses5-dev ncurses-devel openssl   一．主库安装及配置 1.源码安装cmake # tar xf cmake-3.0.0.tar.gz # cd cmake-3.0.0

Redis主从实现读写分离_Redis

前言 大家在工作中可能会遇到这样的需求,即Redis读写分离,目的是为了压力分散化.下面我将为大家介绍借助AWS的ELB实现读写分离,以写主读从为例. 实现 引用库文件 <!-- redis客户端 --> <dependency> <groupId>redis.clients</groupId> <artifactId>jedis</artifactId> <version>2.6.2</version> &l

阿里云数据库全新功能Redis读写分离，全维度技术解析

阿里云Redis读写分离典型场景:如何轻松搭建电商秒杀系统https://yq.aliyun.com/articles/277885 文末有彩蛋,请务必记得看完整哦 背景 目前的阿里云redis不管主从版还是集群规格,slave作为备库不对外提供服务,只有在发生HA,slave提升为master后才承担读写.这种架构读写请求都在master上完成,一致性较高,但性能受到master数量的限制.经常有用户数据较少,但因为流量或者并发太高而不得不升级到更大的集群规格. 为满足读多写少的业务场景,最大

阿里云Redis读写分离典型场景：如何轻松搭建电商秒杀系统

阿里云数据库全新功能Redis读写分离,全维度技术解析 https://yq.aliyun.com/articles/277325 文末有彩蛋,请务必记得看完整哦 背景 秒杀活动是绝大部分电商选择的低价促销,推广品牌的方式.不仅可以给平台带来用户量,还可以提高平台知名度.一个好的秒杀系统,可以提高平台系统的稳定性和公平性,获得更好的用户体验,提升平台的口碑,从而提升秒杀活动的最大价值.本次主要讨论阿里云云数据库Redis缓存设计高并发的秒杀系统. 秒杀的特征 秒杀活动对稀缺或者特价的商品进行定时

MySQL实战系列4: 主从复制、读写分离、备份恢复全解析

作者介绍 索宁擅长Python开发.MySQL.前端等众多技术领域曾负责众多企业安全架构解决方案 涉猎行业有媒体.出版社.航空运输.医疗.军队.政府.教育等.   一.MySQL主从复制   1.简介   我们为什么要用主从复制   主从复制目的 可以做数据库的实时备份保证数据的完整性 可做读写分离主服务器只管写从服务器只管读这样可以提升整体性能.   原理图 从上图可以看出同步是靠log文件同步读写完成的.   2.更改配置文件   两天机器都操作确保 server-id 要不同通常主ID要小

Yii实现多数据库主从读写分离的方法_php实例

本文实例讲述了Yii实现多数据库主从读写分离的方法.分享给大家供大家参考.具体分析如下: Yii框架数据库多数据库.主从.读写分离 实现,功能描述: 1.实现主从数据库读写分离 主库:写 从库(可多个):读 2.主数据库无法连接时 可设置从数据库是否 可写 3.所有从数据库无法连接时 可设置主数据库是否 可读 4.如果从数据库连接失败 可设置N秒内不再连接 利用yii扩展实现,代码如下: 复制代码 代码如下: <?php /**  * 主数据库 写 从数据库(可多个)读  * 实现主从数据库 读

Yii多数据库主从读写分离实例介绍

Yii框架数据库多数据库.主从.读写分离 实现 功能描述: 1.实现主从数据库读写分离 主库:写 从库(可多个):读 2.主数据库无法连接时 可设置从数据库是否 可写 3.所有从数据库无法连接时 可设置主数据库是否 可读 4.如果从数据库连接失败 可设置N秒内不再连接 利用yii扩展实现:  代码如下 复制代码 <?php   /**  * 主数据库 写 从数据库(可多个)读  * 实现主从数据库 读写分离 主服务器无法连接 从服务器可切换写功能  * 从务器无法连接 主服务器可切换读功  *

详解MySQL的主从复制、读写分离、备份恢复_Mysql

一.MySQL主从复制 1.简介 我们为什么要用主从复制 主从复制目的 可以做数据库的实时备份保证数据的完整性 可做读写分离主服务器只管写从服务器只管读这样可以提升整体性能. 原理图 从上图可以看出同步是靠log文件同步读写完成的. 2.更改配置文件 两天机器都操作确保 server-id 要不同通常主ID要小于从ID.一定注意. # 3306和3307分别代表2台机器 # 打开log-bin,并使server-id不一样 #vim /data/3306/my.cnf log-bin = /da

MySQL-Proxy实现MySQL读写分离提高并发负载

工作拓扑: MySQL Proxy有一项强大功能是实现"读写分离",基本原理是让主数据库处理写方面事务,让从库处理SELECT查询. Amoeba for MySQL是一款优秀的中间件软件,同样可以实现读写分离,负载均衡等功能,并且稳定性也高于MySQL Proxy,有兴趣的可以测试一下. 环境描述: 操作系统:CentOS6.3_x64 主服务器Master:192.168.0.202 从服务器Slave:192.168.0.203 调度服务器MySQL-Proxy:192.168.