redis6主从复制及集群(代码片段)

知道什么是码怪吗? 知道什么是码怪吗?     2022-11-29     652

关键词:

目录

主从复制

搭建过程

复制原理

一主多仆

薪火相传

反客为主

问题分析

从机宕机

主机宕机

集群

搭建集群

集群操作

存储数据

读取数据

 故障恢复


主从复制

主机数据更新后根据配置和策略, 自动同步到备机的master/slaver机制,Master以写为主,Slave以读为主,可实现读写分离,性能扩展。容灾快速回复。

主机做写操作,从机做读操作。

搭建过程

(1)在Linux系统中新建一个文件夹,复制一份配置文件redis.conf到该文件夹下。将复制过去的配置文件中的 appendonly 设置为 no。

 (2)在第一步创建的文件中,创建多个redis配置文件,引入redis.conf,设置端口号 port ,pid文件名称 pidfile ,持久化文件名称 dbfilename 。三个文件当中只有数字不同,其余相同。

(3)启动创建的redis服务器,三个会话窗口分别连接3个redis服务器。

查看系统进程,三个redis服务器已启动并且建立了三个连接。

 (4)在连接中输入 info replication 查看三台主机的运行情况,发现并没有建立主从关系,每一个redis服务器都是主机。

info replication 

 (5)建立主从关系,输入 slaveof  主机IP  端口号。

slaveof <主机IP> <端口号>

再次查看从机信息,发现已经有主机IP和端口

 查看主机信息,显示从机连接数2个。

 (6)主机进行写操作,从机能够同步数据,并且从机不能进行写操作。

复制原理

全量复制:从机接收到数据库文件数据后,将其存盘并加载到内存中。

增量复制:主机将所有新收集到的修改命令依次传送给从机,完成同步。

一主多仆

顾名思义,一个主机连接多个从机。

复制过程:(1)从机和主机建立主从关系时,从机向主机发送数据同步请求(2)主机接收请求后将当前数据持久化,然后将持久化后的文件发送给从机,从机读取完成同步。(3)主机新增数据之后,主机将新增数据发送给从机进行数据同步,从机只有连接时申请了一次数据同步,其余时间都是主机主动发送。

薪火相传

主机的从机也可以是其他服务器的主机。

 复制过程:主机连接从机,从机也可以是其他服务器的主机。类似于java当中的继承关系。当主机修改信息后,从机来更新其他服务器的数据。

反客为主

主机宕机,从机上位。

当主机宕机之后,从机可以升级为主机,通过在从机中输入下面一行代码实现。

slaveof no one

可以通过设置哨兵来实现自动监控主机,当主机宕机后从机自动晋升为主机,不需要人工设置。 

问题分析

从机宕机

(1)从机挂掉之后,重新启动从机,从机是以主机的形式存在的,并不是之前的主机的从机。

(2)如果主机在从机挂掉这段时间内添加了新的数据,当重启从机并建立主从关系后,从机的数据仍然和主机保持一致。

(3)从机重启之后,还没有和主机建立主从关系前添加的数据将会在建立关系后消失,并且之后保留的将会是主机的数据。 

主机宕机

(1)主机挂掉之后,从机显示信息中主机仍然不变,只是状态变为了down。

(2)重启主机,仍然是主服务器。

集群

Redis 集群实现了对Redis的水平扩容,即启动N个redis节点,将整个数据库分布存储在这N个节点中,每个节点存储总数据的1/N。

Redis 集群通过分区(partition)来提供一定程度的可用性(availability): 即使集群中有一部分节点失效或者无法进行通讯, 集群也可以继续处理命令请求。

搭建集群

(1)在搭建主从关系中新建的文件夹下,修改redis6379.conf文件的内容,添加如下信息。并且复制5份。

cluster-enabled yes    打开集群模式
cluster-config-file nodes-6379.conf  设定节点配置文件名
cluster-node-timeout 15000   设定节点失联时间,超过该时间(毫秒),集群自动进行主从切换。

将每一份的数据中的数字都进行修改。

(2)启动这6个redis服务,并且合成一个集群。

 

进入到redis安装目录下的src文件夹中,执行如下命令,命令表示以最简单的方式建立集群,即一个主节点,一个从节点一一对应。分配原则尽量保证每个主数据库运行在不同的IP地址,每个从库和主库不在一个IP地址上。

redis-cli --cluster create --cluster-replicas 1 <ip>:<端口> <ip>:<端口>

 集群搭建成功

 

 (3)连接集群,查看集群信息。

使用下面的指令连接集群

redis-cli -c -p 6379

使用下面的指令查看集群节点信息

cluster nodes

集群操作

集群搭建成功后,redis会显示这个集群的插槽数目,即slot。

一个 Redis 集群包含 16384 个插槽(hash slot),数据库中的每个键都属于这 16384 个插槽的其中一个, 集群使用公式 CRC16(key) % 16384 来计算键 key 属于哪个槽, 其中 CRC16(key) 语句用于计算键 key 的 CRC16 校验和。

集群中的每个节点负责处理一部分插槽。 举个例子, 如果一个集群可以有主节点, 其中:

节点 A 负责处理 0 号至 5460 号插槽。

节点 B 负责处理 5461 号至 10922 号插槽。

节点 C 负责处理 10923 号至 16383 号插槽。

存储数据

测试案例一:添加数据

 我们在6379端口对应的redis服务器添加数据,最终添加到了6381端口下,在6381端口下添加的数据,又是在6379下添加。

这是因为redis将key通过CRC16语句计算了校验和,根据校验和与16384来取余的结果,来选择不同的服务器进行添加数据。

测试案例二:多键操作

slot键值不同,是不能使用mget,mset等多键操作。

测试案例三:分组存放

可以使用来定义组的概念,让key中内相同内容的键值对放到同一个slot中。

读取数据

测试案例一:读取数据

不同的key,需要到对应的节点当中去取数据。

测试案例二:有关key和slot的操作

查看 key 对应的 slot

cluster keyslot <key>

 查看 slot 对应了多少个 key(只能看当前节点范围内的slot)

cluster countkeysinslot <slot>

 返回 countslot 槽中的键(只能看当前节点范围内的slot)

cluster getkeysinslot <slot> <count>

 

 故障恢复

(1)如果某一台主机宕机,其对应的从机将会升级为主机。

(2)如果再次启动之前的主机,将会成为从机。(可以理解为风水轮流转,老大轮流当)

(3)如果主机和从机都宕机,集群不一定挂掉。如果 redis.conf 中的参数 cluster-require-coverage 设置为 yes ,那么集群挂掉。如果设置为 no ,那么这个节点对应的插槽数据全都不能使用,也无法存储。

高性能云服务器 精品线路独享带宽,毫秒延迟,年中盛惠 1 折起

redis(主从复制哨兵模式集群)概述及部署(代码片段)

Redis(主从复制、哨兵模式、集群)概述及部署前言一、Redis主从复制1、Redis主从复制的概念2、Redis主从复制的作用3、Redis主从复制的流程4、Redis主从复制的搭建1、环境配置/安装包2、安装Redis(所有主机)3、修改... 查看详情

nosql之redis主从复制哨兵和集群介绍及详细搭建步骤(代码片段)

Redis主从复制、哨兵和集群一、主从复制1.1主从复制的概念1.2主从复制的作用1.3主从复制的流程1.4部署Redis主从复制步骤1.5部署Redis主从复制的具体操作步骤(实操)二、哨兵模式2.1哨兵模式的原理2.2哨兵模式的作用2.3哨... 查看详情

redis主从集群搭建及主从复制原理解析(代码片段)

...b;并解析了他们的应用场景;本篇文章会紧接着写redis主从集群的搭建,并详解其中配置,以及主从复制的原理解析。高可用主从集群在Redis中要达到高可用, 查看详情

redis6---主从复制篇(代码片段)

主从复制篇主从复制是什么能干嘛怎么玩:主从复制1:在根目录下创建一个myredis的文件夹步骤2:复制redis.conf配置文件到文件夹中步骤3:配置一主两从的操作,创建三个配置文件步骤4:在三个配置文件中写入... 查看详情

redis6.0高级(代码片段)

文章目录Redis_Jedis的使用Redis与SpringBoot整合Redis_事务_锁机制_秒杀Multi、Exec、discard命令事务的错误处理WATCHkey[key...]命令unwatch命令Redis事务三特性Redis持久化之RDBRDB是什么备份是如何执行的ForkRDB持久化流程dump.rdb文件RDB的优势RDB劣... 查看详情

redis集群故障监测及哨兵机制原理解析(代码片段)

Redis主从集群搭建及主从复制原理解析前言上篇文章我解析了如何搭建主从集群,以及主从复制原理分析;本篇文章继续对集群继续沉入,以及常见运行时的检测工具,及哨兵机制原理的解析,以及遇到常见问... 查看详情

rediscluster集群扩容主从节点详细教程(代码片段)

文章目录1.Cluster集群扩容概念2.在新节点部署rediscluster3.使用工具将redis-4加入集群3.1.安装ruby环境3.2.将redis-4加入集群4.将槽位重新分配4.1.所有节点分出槽位给新节点4.2.迁移指定节点的槽位给新节点4.3.查看集群信息及状态5.配置... 查看详情

redis主从复制-哨兵-集群相关部署(代码片段)

Redis主从复制+哨兵+集群一.主从复制-哨兵-集群二.主从复制1.主从复制的作用2.主从复制流程3.部署Redis主从复制三.哨兵模式1.哨兵模式的原理2.哨兵模式的作用3.哨兵结构由两部分组成,哨兵节点和数据节点部署哨兵模式... 查看详情

docker搭建redis6.2哨兵集群(代码片段)

环境准备搭建docker环境参考docker/k8s(1):docker安装使用下载Redis最新镜像$dockerpullredis$dockerimagesREPOSITORYTAGIMAGEIDCREATEDSIZEredislatest02c7f20544052weeksago105MB搭建Redis主从集群上面是我的目录结构。其中server/data是自动默认生成的。re 查看详情

docker搭建redis6.2哨兵集群(代码片段)

环境准备搭建docker环境参考docker/k8s(1):docker安装使用下载Redis最新镜像$dockerpullredis$dockerimagesREPOSITORYTAGIMAGEIDCREATEDSIZEredislatest02c7f20544052weeksago105MB搭建Redis主从集群上面是我的目录结构。其中server/data是自动默认生成的。re 查看详情

docker搭建redis6.2哨兵集群(代码片段)

环境准备搭建docker环境参考docker/k8s(1):docker安装使用下载Redis最新镜像$dockerpullredis$dockerimagesREPOSITORYTAGIMAGEIDCREATEDSIZEredislatest02c7f20544052weeksago105MB搭建Redis主从集群上面是我的目录结构。其中server/data是自动默认生成的。re 查看详情

linux环境安装redis高可用及配置主从复制哨兵模式分布式集群模式(代码片段)

Linux环境安装Redis高可用及配置主从复制、哨兵模式、分布式集群模式认识一、安装二、主从复制1.192.168.80.130:7001配置主机master2.192.168.80.131:7002配置从机slave3.验证及宕机切换主机三、哨兵模式1.192.168.80.132:7003/27003配置主机2.192.168.... 查看详情

linux环境安装redis高可用及配置主从复制哨兵模式分布式集群模式(代码片段)

Linux环境安装Redis高可用及配置主从复制、哨兵模式、分布式集群模式认识一、安装二、主从复制1.192.168.80.130:7001配置主机master2.192.168.80.131:7002配置从机slave3.验证及宕机切换主机三、哨兵模式1.192.168.80.132:7003/27003配置主机2.192.168.... 查看详情

redis主从复制哨兵集群模式(代码片段)

Redis主从复制、哨兵、集群模式单节点模式SpringBoot整合@Bean(name="singleClient")publicRedissonClientsingleRedissonClient()tryConfigconfig=newConfig();config.useSingleServer().setAddress("redis://& 查看详情

redis高可用方案主从及哨兵(代码片段)

Redis集群——主从复制以及哨兵模式##主从复制的定义Redis的主从复制表示将Redis的服务器分为主服务器(Master)以及多个从服务器(Slaves),其目的是减少主服务器的读取数据的压力。一个Master可以有多个该服... 查看详情

缓存加速------redis主从复制,哨兵模式,集群(代码片段)

目录前言一.Redis主从复制1.Redis主从复制概述2.Redis主从复制作用3.Redis主从复制流程4.搭建Redis主从复制①环境准备②安装Redis③修改Redis配置文件(Master节点操作)④修改Redis配置文件(Slave节点操作)⑤验证主从效果⑥在Master节点上验... 查看详情

缓存加速------redis主从复制,哨兵模式,集群(代码片段)

目录前言一.Redis主从复制1.Redis主从复制概述2.Redis主从复制作用3.Redis主从复制流程4.搭建Redis主从复制①环境准备②安装Redis③修改Redis配置文件(Master节点操作)④修改Redis配置文件(Slave节点操作)⑤验证主从效果⑥在Master节点上验... 查看详情

redis_11_redis集群实现主从复制应对高并发(代码片段)

文章目录一、前言二、主从复制搭建三、主从复制原理3.1连接阶段3.2数据同步阶段3.3命令传播阶段3.4小结四、主从复制不足五、尾声一、前言Redis搭建的集群有三个作用:1、Redis集群实现主从复制应对高并发2、Redis集群实现Se... 查看详情