redis学习之旅--主从复制

赵jc      2022-02-16     425

关键词:

主从复制

相关概念

主从复制,是指将一台Redis服务器的数据,复制到其他的Redis服务器。前者称为主节点(master/leader),后者称为从节点(slave/follower);

  • 数据的复制是单向的,只能由主节点到从节点。
  • Master以写为主,Slave 以读为主。
  • 默认情况下,每台Redis服务器都是主节点;
  • 一个主节点可以有多个从节点(或没有从节点),但一个从节点只能有一个主节点。

主从复制的应用

  • 1、数据冗余:主从复制实现了数据的热备份,是持久化之外的一种数据冗余方式。
  • 2、故障恢复:当主节点出现问题时,可以由从节点提供服务,实现快速的故障恢复;实际上是一种服务 的冗余。
  • 3、负载均衡:在主从复制的基础上,配合读写分离,可以由主节点提供写服务,由从节点提供读服务(即写Redis数据时应用连接主节点,读Redis数据时应用连接从节点),分担服务器负载;尤其是在写少读多的场景下,通过多个从节点分担读负载,可以大大提高Redis服务器的并发量。
  • 4、高可用(集群)基石:除了上述作用以外,主从复制还是哨兵和集群能够实施的基础,因此说主从复 制是Redis高可用的基础。

主从复制的意义

一般来说,要将Redis运用于工程项目中,只使用一台Redis是万万不能的(宕机),原因如下:

  • 1、从结构上,单个Redis服务器会发生单点故障,并且一台服务器需要处理所有的请求负载,压力较大;

2、从容量上,单个Redis服务器内存容量有限,就算一台Redis服务器内存容量为256G,也不能将所有内存用作Redis存储内存,一般来说,单台Redis最大使用内存不应该超过20G。
电商网站上的商品,一般都是一次上传,无数次浏览的,说专业点也就是"多读少写"。
对于这种场景,我们可以使如下这种架构:

主从复制,读写分离! 80% 的情况下都是在进行读操作!减缓服务器的压力!架构中经常使用! 一主二从!
只要在公司中,主从复制就是必须要使用的,因为在真实的项目中不可能单机使用Redis!

测试

环境配置

只配置从库,不用配置主库!

  • 查看当前配置信息 info replication
127.0.0.1:6379> info replication	#查看当前库的信息
# Replication
role:master		#角色 master
connected_slaves:0	#从机的个数(目前没有)
master_replid:0a24bb6800f3566379d0953f6b86769d019b8fe4
master_replid2:0000000000000000000000000000000000000000
master_repl_offset:0
second_repl_offset:-1
repl_backlog_active:0
repl_backlog_size:1048576
repl_backlog_first_byte_offset:0
repl_backlog_histlen:0

复制3个配置文件,然后修改对应的信息
1、端口


2、pid 名字

3、log文件名字

4、dump.rdb 名字

修改完毕之后,启动我们的3个redis服务器,可以通过进程信息查看!

一主二从模式

默认情况下,每台Redis服务器都是主节点;
我们一般情况下只用配置从机就好了!认老大! 一主 (79)二从(80,81)

查看主机 info replication

配置从机 slaveof 127.0.0.1 6379

查看主机 info replication

使用相同的命令将6181的端口也配置为6379的从机

真实的从主配置应该在配置文件中配置(之前讲到过),这样的话是永久的,我们这里使用的是命令,暂时的!

验证

主机可以写,从机不能写只能读!主机中的所有信息和数据,都会自动被从机保存!

  • 主机写
  • 从机只能读,不能写

    主机断开连接,从机依旧连接到主机的,但是没有写操作,这个时候,主机如果回来了,从机依旧可以直接获取到主机写的信息!
  • 主机断开连接,重新连接后设置k2

  • 从机前后获取k2的值

如果是使用命令行,来配置的主从,这个时候从机如果重启了,就会变回主机!只要再次变为从机,立马就会从主机中获取值!

  • 关闭6781断开的服务,并重新开启(重启后为主机)

  • 此时主机设置值,6381端口便获取不到了


  • 6381再次变为6379的从机后可以再次获取值

复制原理

Slave 启动成功连接到 master 后会发送一个sync同步命令Master 接到命令,启动后台的存盘进程,同时收集所有接收到的用于修改数据集命令,在后台进程执行完毕之后,master将传送整个数据文件到slave,并完成一次完全同步。

  • 全量复制:而slave服务在接收到数据库文件数据后,将其存盘并加载到内存中。(第一次连接)
  • 增量复制:Master 继续将新的所有收集到的修改命令依次传给slave,完成同步(第二三次之后的数据)

但是只要是重新连接master,一次完全同步(全量复制)将被自动执行! 我们的数据一定可以在从机中看到!

层层链路模式

上一个连接的是Master,下一个连接 Salove!这时候也可以完成我们的主从复制!

  • 修改6381主机为6380

  • 查看6380和6379的情况


  • 6379设置值,6381也可以获取到

谋朝篡位

如果没有老大了,这个时候能不能选择一个老大出来呢? 手动!

  • 关闭6379端口
  • 6380当老大 slaveof no one

  • 6381端口当6380端口的从节点


  • 当6379端口回来后,6381已经不属于他了,相当于被篡位了

如果主机断开了连接,我们可以使用 slveof no one 让自己变成主机!其他的节点就可以手动连接到最新的这个主节点(手动)!如果这个时候老大修复了,那就重新连接!

深入学习redis主从复制

一、主从复制概述主从复制,是指将一台Redis服务器的数据,复制到其他的Redis服务器。前者称为主节点(master),后者称为从节点(slave);数据的复制是单向的,只能由主节点到从节点。默认情况下,每台Redis服务器都是主节点;且... 查看详情

深入学习redis主从复制等

https://www.cnblogs.com/kismetv/p/9236731.html 查看详情

深入学习redis:主从复制(代码片段)

...l-timeout、client-output-buffer-limitslave)等。系列文章深入学习Redis(1):Redis内存模型深入学习Redis(2):持久化深入学习Redis(3):主从复制深入学习Redis(4)& 查看详情

redis学习手册(主从复制)

一、Redis的Replication:   这里首先需要说明的是,在Redis中配置Master-Slave模式真是太简单了。相信在阅读完这篇Blog之后你也可以轻松做到。这里我们还是先列出一些理论性的知识,后面给出实际操作的案例。  &n... 查看详情

redis学习--redis主从复制与redis集群搭建(代码片段)

Redis主从复制主从复制是什么主机数据更新后根据配置和策略,自动同步到备机的master/slaver机制,Master以写为主,Slave以读为主主从复制能干嘛读写分离,性能扩展;容灾快速恢复;怎么玩:主从复制... 查看详情

深入学习redis:主从复制(代码片段)

前言在前面的两篇文章中,分别介绍了Redis的内存模型和Redis的持久化。在Redis的持久化中曾提到,Redis高可用的方案包括持久化、主从复制(及读写分离)、哨兵和集群。其中持久化侧重解决的是Redis数据的单机备... 查看详情

redis学习笔记—主从复制(代码片段)

在分布式系统中为了解决单点问题,通常会把数据复制多个副本部署到其他机器,满足故障恢复和负载均衡等需求。Redis也是如此,它为我们提供了复制功能,实现了相同数据的多个Redis副本。复制功能是高可用Red... 查看详情

尚硅谷redis学习笔记--redis主从复制(代码片段)

1.是什么主机数据更新后根据配置和策略,自动同步到备机的master/slaver机制,Master以写为主,Slave以读为主2.能干嘛读写分离,性能扩展容灾快速恢复3.具体操作:主从复制1、创建myredis文件夹2、复制redis.conf配... 查看详情

redis学习总结(中)——事务持久化和主从复制(代码片段)

Redis学习总结(中)——事务、持久化和主从复制一、Redis的事务操作1.1事务的操作和错误处理1.2Watch锁1.3Redis_事务_秒杀案例1.3.1使用事务(解决超卖)+连接池(解决超时问题)1.3.2使用LUA脚本解决库存... 查看详情

深入学习redis:哨兵(代码片段)

前言在 深入学习Redis(3):主从复制 中曾提到,Redis主从复制的作用有数据热备、负载均衡、故障恢复等;但主从复制存在的一个问题是故障恢复无法自动化。本文将要介绍的哨兵,它基于Redis主从复制&... 查看详情

redis学习总结(22)——redis的主从复制是如何做的?复制过程中也会产生各种问题?(代码片段)

前言如果Redis的读写请求量很大,那么单个实例很有可能承担不了这么大的请求量,如何提高Redis的性能呢?你也许已经想到了,可以部署多个副本节点,业务采用读写分离的方式,把读请求分担到多个副本节点上,提高访问性... 查看详情

聊聊redis的主从复制吧

...章不定期同步公众号,还有各种一线大厂面试原题、我的学习系列笔记。聊聊基础概念主从复制与主从替换主从复制不同于主从替换,主从复制是正常情况下主节点同步数据到从节点;主从替换是主节点挂了之后,把从节点替换... 查看详情

redis主从复制

...在云服务器上的,感兴趣的小伙伴可以选择3A云服务进行学习一、主从复制简介1.你的“Redis”是否高可用单机redis的风险与问题问题1.机器故障现象:硬盘故障、系统崩溃本质:数据丢失,很可能对业务造成灾难性打击结论:基... 查看详情

redis学习笔记9:主从复制

一、主从复制是什么?    主从复制,是指将一台Redis服务器的数据,复制到其他的Redis服务器。前者称为主节点(master/leader),后者称为从节点(slave/follower);数据的复制是单向的,只能由主节点到从节点... 查看详情

深入学习redis:哨兵(代码片段)

前言在 深入学习Redis(3):主从复制 中曾提到,Redis主从复制的作用有数据热备、负载均衡、故障恢复等;但主从复制存在的一个问题是故障恢复无法自动化。本文将要介绍的哨兵,它基于Redis主从复制&... 查看详情

redis源码学习从源码角度看主从复制:前期提要(代码片段)

文章目录主从复制概述主从复制使用结构主从复制概述关于主从复制的概述半年前写过,篇实践性,有兴趣的小伙伴可以看一下:【redis】跟我一起动手玩玩redis主从复制和哨兵模式一般来说,主从、哨兵、集群&#x... 查看详情

redis源码学习从源码角度看主从复制:主从之间的“三次握手”(代码片段)

主从握手流程1、发送REPLICAOF命令到某个服务端,要求它成为指定服务器的从节点2、在配置文件中写明主从关系下面我们从从节点的视角来看主从握手环节:一次握手从节点使用replicaofCommand函数处理REPLICAOF命令,该命... 查看详情

redis分布式基石——主从复制技术详述

...❤️《Redis精通系列》❤️上千人点赞收藏,全套Redis学习资料,大厂必备技能!目录1、简介2、主从复制的演进2.1版本2.8以前2.1.1同步2.1.2命令传播2.1.3缺陷2.2版本2.8-4.02.2.1改进点2.2.2psync如何实现2.2.3完整的psync2.3版本4... 查看详情