关键词:
点击关注公众号,Java干货及时送达
作者:蘑菇先生
出处:http://mushroom.cnblogs.com/
关于Redis高可用方案,看到较多的是keepalived、zookeeper方案。
keepalived是主备模式,意味着总有一台浪费着。
zookeeper工作量成本偏高。
本文主要介绍下使用官方sentinel做redis高可用方案的设计。
Redis Sentinel
Sentinel介绍
Sentinel是Redis官方为集群提供的高可用解决方案。在实际项目中可以使用sentinel去做redis自动故障转移,减少人工介入的工作量。
另外sentinel也给客户端提供了监控消息的通知,这样客户端就可根据消息类型去判断服务器的状态,去做对应的适配操作。
下面是Sentinel主要功能列表:
Notification:在发现某个redis实例死的情况下,Sentinel能通过API通知系统管理员或其他程序脚本。
Automatic failover:如果一个master挂掉后,sentinel立马启动故障转移,把某个slave提升为master。其他的slave重新配置指向新master。
Sentinel配置
Sentinel本质上只是一个运行在特殊模式下的redis服务器,通过不同配置来区分提供服务。
sentinel.conf配置:
// [监控名称] [ip] [port] [多少sentinel同意才发生故障转移]
sentinel monitor mymaster 127.0.0.1 6379 2
// [监控名称] [Master多少毫秒后不回应ping命令,就认为master是主观下线状态]
sentinel down-after-milliseconds mymaster 60000
// [故障转移超时时间]
sentinel failover-timeout mymaster 180000
//[在执行故障转移时,最多可以有多少个从服务器同时对新的主服务器进行同步]
sentinel parallel-syncs mymaster 1
sentinel需要使用redis2.8版本以上,启动如下:
redis-sentinel sentinel.conf
启动后Sentinel会:
以10秒一次的频率,向被监视的master发送info命令,根据回复获取master当前信息。
以1秒一次的频率,向所有redis服务器、包含sentinel在内发送PING命令,通过回复判断服务器是否在线。
以2秒一次的频率,通过向所有被监视的master,slave服务器发送包含当前sentinel,master信息的消息。
另外建议sentinel至少起3个实例以上,并配置2个实例同意即可发生转移。5个实例,配置3个实例同意以此类推。
故障转移消息接收的3种方式
Redis服务器一旦发送故障后,sentinel通过raft算法投票选举新master。故障转移过程可以通过sentinel的API获取/订阅接收事件消息。Redis 系列面试题和答案我都整理完了,关注公众号Java技术栈回复:面试,可以免费获取哦。
脚本接收
//当故障转移期间,可以指定一个“通知”脚本用来告知系统管理员,当前集群的情况。
//脚本被允许执行的最大时间为60秒,如果超时,脚本将会被终止(KILL)
sentinel notification-script mymaster /var/redis/notify.sh
//故障转移期之后,配置通知客户端的脚本.
sentinel client-reconfig-script mymaster /var/redis/notifyReconfig.sh
客户端直接接收
Sentinel的故障转移消息通知使用的是redis发布订阅,就是说在故障转移期间所有产生的事件信息,都通过频道(channel)发布出去。
比如我们加台slave服务器,sentinel监听到后会发布加slave的消息到"+slave"频道上,客户端只需要订阅"+slave"频道即可接收到对应消息。
其消息格式如下:[实例类型] [事件服务器名称] [服务器ip] [服务器端口] @[master名称] [ip] [端口]
<instance-type> <name> <ip> <port> @ <master-name> <master-ip> <master-port>
通知消息格式示例:
* //订阅类型, *即订阅所有事件消息。
-sdown //消息类型
slave 127.0.0.1:6379 127.0.0.1 6379 @ mymaster 127.0.0.1 6381
订阅消息示例:
using (RedisSentinel rs = new RedisSentinel(CurrentNode.Host, CurrentNode.Port))
var redisPubSub = new RedisPubSub(node.Host, node.Port);
redisPubSub.OnMessage += OnMessage;
redisPubSub.OnSuccess += (msg) =>;
redisPubSub.OnUnSubscribe += (obj) =>;
redisPubSub.OnError = (exception) => ;
redisPubSub.PSubscribe("*");
服务间接接收
这种方式在第二种基础上扩展了一层,即应用端不直接订阅sentinel。单独做服务去干这件事情,然后应用端提供API供这个服务回调通知。
这样做的好处在于:
减少应用端监听失败出错的可能性。
应用端由主动方变成被动方,降低耦合。
性能提高,轮询变回调。
独立成服务可扩展性更高。
比如:
1:以后换掉sentinel,我们只需要动服务即可,应用端无需更改。
2:可以在服务内多增加一层守护线程去主动拉取redis状态,这样可确保即使sentinel不生效,也能及时察觉redis状态,并通知到应用端。当然这种情况很极端,因为sentinel配的也是多节点,同时挂的几率非常小。示例:应用端提供回调API,在这个API逻辑下去刷新内存中的Redis连接。
http://127.0.0.1/redis/notify.api
独立服务监控到状况后,调用API通知应用端:
httprequest.post("http://127.0.0/redis/notify.api");
整体设计
推荐使用第三种,其整体流程图如下:
总结
各种sentinel通知消息类型见官方文档,项目中使用的redis客户端在github上。本文分享了楼主在项目中做Redis高可用的经验,希望对大家有所帮助。
在人力物力满足的情况下还是推荐使用zookeeper方案的。只有三五杆枪的情况下也就退而求其次,利用最小成本满足需求并保留可扩展性。
相信没有最好的架构,只有更合适的架构。
参考:http://redis.io/topics/sentinel
回复 【加群】获取github掘金交流群
回复 【电子书】获取2020电子书教程
回复 【C】获取全套C语言学习知识手册
回复 【Java】获取java相关的视频教程和资料
回复 【爬虫】获取SpringCloud相关多的学习资料
回复 【Python】即可获得Python基础到进阶的学习教程
回复 【idea破解】即可获得intellij idea相关的破解教程
关注我gitHub掘金,每天发掘一篇好项目,学习技术不迷路!
高可用和灾备(代码片段)
高可用SFB角色前端和其他角色的高可用:池服务DNS轮询:成本低,效率尚可,SFB默认高可用推荐:角色池中的服务器的数量3台以上HLB高可用:硬件的负载平衡设备,不支持NLBhttps://docs.microsoft.com/zh-cn/SkypeForBusiness/certification/infra-loa... 查看详情
keepalived+nginx高可用环境搭建
高可用方案其实很多,而且有很多成本是非常低和简单的。比如你如果有一个网站,高可用最简单的就是nds+nginx+两台机器。我们由于是客户的一个项目,dns申请是非常麻烦的,所以才考虑用keepalived+nginx... 查看详情
redis集群高可用架构(代码片段)
Redis集群高可用架构1、Redis高可用集群1.1、Redis高可用集群模式和哨兵模式方案比较1.2、Redis高可用集群搭建2、Java操作Redis集群3、Redis集群原理分析3.1、槽位定位算法3.2、跳转重定位3.3、Redis集群节点间的通信机制3.4、Redis集群选... 查看详情
redis高可用集群搭建
redis高可用集群搭建_恶魔的复活的博客-CSDN博客_redis集群搭建 查看详情
redis高可用集群搭建
redis高可用集群搭建_恶魔的复活的博客-CSDN博客_redis集群搭建 查看详情
redis高可用集群搭建
redis高可用集群搭建_恶魔的复活的博客-CSDN博客_redis集群搭建 查看详情
iphone贵但使用成本低,安卓手机便宜其实使用成本高
...明安卓手机比iPhone更值得购买,然而如果考虑到使用成本的问题就会发现iPhone的使用成本比安卓手机要低许多。以国内知名的二手手机回收网站为例,iPhone12 64GB版本的回收价为2995元,剩余价值相当于去年定价6299元47... 查看详情
redis高可用架构方案
高可用高扩展低延迟交易处理系统架构设计
为实现一个高TPS、高可靠性、高扩展性、低响应延迟的交易处理系统,在系统架构设计上,需要有诸多考虑。 1.交易处理系统的功能 交易系统是用于连接多个不同的交易请求系统(上游系统)与交易受理系统(下游系统... 查看详情
redis高可用之哨兵机制实现细节(代码片段)
Redis高可用之哨兵机制实现细节本文来自我的technotes[1]Redis篇,欢迎你常来逛逛。正文在上一篇的文章《Redis高可用全景一览》中,我们学习了Redis的高可用性。高可用性有两方面含义:一是服务少中断,二是数据少丢失。主从库... 查看详情
redis——redis高可用持久化及性能管理(代码片段)
Redis高可用从redis非关系型数据库而言,除了保证提供正常服务(如主从分离、快速容灾技术),还需要考虑数据容量的扩展,数据安全不会丢失等;那么实现高可用的技术主要包括持久化、主从复制、哨兵和集群主... 查看详情
redis——redis高可用持久化及性能管理(代码片段)
Redis高可用从redis非关系型数据库而言,除了保证提供正常服务(如主从分离、快速容灾技术),还需要考虑数据容量的扩展,数据安全不会丢失等;那么实现高可用的技术主要包括持久化、主从复制、哨兵和集群主... 查看详情
redis高可用三种模式(代码片段)
Redis高可用三种模式一、Redis主从复制1.概念2.作用3.工作流程4.实验部署二、Redis哨兵模式1.原理2.作用3.结构4.启动5.实验部署三、Redis群集模式1.概述2.作用(1)数据分区(2)高可用3.Redis集群的数据分片Redis集群的... 查看详情
架构师修炼之路redis哨兵机制(sentinel):实现高可用redis哨兵机制(sentinel):实现高可用...
引言本文主要介绍Redis集群主节点故障的解决方案:哨兵机制.解决什么问题Redis集群中,master主节点发生故障怎么办?Redis主从拓扑哨兵(Sentinel)主要是为了解决在主从复制架构中出现宕机的情况,主要分为两种情况:1).从Redis宕机这个相... 查看详情
redis高可用方案详解(代码片段)
...Redis服务的主流服务都会受到影响,这时就需要一种Redis高可用方案。一般来说,一个高可用的方案要满足以下三点要求:数据备份(冗余)数据冗余在不同的节点上,防止数据丢失故障自动切换正在服务的节点故障时,可以自动地切换到... 查看详情
分布式id生成
...集群分段才能满足高可用,但是节点故障后会错乱,维护成本较高,安全性不高。snowflake算法:在时间上有序且单调递增。生成64位的long型整数,转换为String后最大长度为19,对索引友好。分布式 查看详情
整理:redis一主多从+sentinel哨兵高可用配置
目录 Redis一主多从+Sentinel哨兵高可用方案一、简介二、主要功能Sentinel的主从原理: 三、环境搭建四、主从复制过程五、安装过程:六、配置主从读写Redis一主多从+Sentinel哨兵高可用方案一、简介Redis-S... 查看详情
lvs&keepalived—集群负载均衡企业高可用详解
...衡概述1、集群通过集群(cluster)技术,可以在付出较低成本的情况下获得在性能、可靠性、灵活性方面的相对高的收益,其任务调度则是集群系统中的核心技术。集群搭建完成后,可以利用多台计算机和组合进行海量请求处理... 查看详情