高并发下的缓存一致性问题

jylsgup jylsgup     2023-02-27     156

关键词:

数据读取的时候:

先查缓存,缓存查不到查数据库,然后把查到的结果放到缓存中。这些都基本上没有争议。

 

但是数据更新的时候:

到底是先更新数据库,还是再更新(or删除)缓存

or 先更新(or删除)缓存,再更新数据库。

一直存在很大的争议。几种实现方式都会出现数据一致性问题。

 

我就说说目前我们系统是怎么做的:

0、先确认缓存命中率。不要动不动就上缓存,有些缓存命中率根本毫无意义,比如涉及到和账户相关的资产、订单等信息,就算放入缓存中,只有用户自己会去查自己的信息,命中率极低。

     一般是把与账户无关,且查询量较大的放入缓存中。     

1、缓存设置过期时间,保证最终一致性。

2、先更新数据库,再删除缓存。

可能会出现更新数据库后,删除缓存失败,导致缓存是旧数据,数据库是新数据,出现不一致性。
但是这种概率非常低。
而且删除缓存失败后,我们也可以做一些处理。
 
为什么是删除缓存,而不是更新缓存。
因为缓存不一定直接是数据库中的内容,有可能是多个字段计算出来的,如果每次更新都去写缓存,会导致性能消耗。
 
为什么不是先删除缓存,再更新数据库。
因为先删除缓存,如果在更新操作还没commit的时候,另外一个线程进来读取数据,缓存查不到,查数据库并放入缓存。然后第一个更新操作commit了。
导致缓存是旧数据,而数据库是新数据。且不会像前面提到的删除缓存失败那样方便做处理。
 
 
如果业务要求强一致性,则尽可能不用缓存。

高并发下缓存失效问题及解决方案

缓存穿透介绍:当查询一个不存在的数据,此时缓存是不命中的,就会去查询db,这将导致每次查询这个不存在的数据都要去访问db,缓存就没有意义了。如果不怀好意的人利用不存在的数据进行攻击,可能导致数据库崩溃解决... 查看详情

高并发下缓存失效问题及解决方案

...置了过期时间的key,如果这些key可能会在某些时间点被超高并发地访问,是一种非常“热点”的数据。如果这个key在大量请求同时进来前正好失效,那么所有对这个key的数据查询都落到db,我们称为缓存击穿。解决:加锁。大量... 查看详情

redis实现高并发下的抢购秒杀功能

...很常见的一个应用场景,主要需要解决的问题有两个:1高并发对数据库产生的压力2竞争状态下如何解决库存的正确减少("超卖"问题)对于第一个问题,已经很容易想到用缓存来处理抢购,避免直接操作数据库,例如使用Redis。... 查看详情

高并发下springcloud hystrix的严重问题?

】高并发下springcloudhystrix的严重问题?【英文标题】:seriousissueofspringcloudhystrixunderhighconcurrency?【发布时间】:2018-04-0523:55:24【问题描述】:第1部分我使用HystrixCommand进行服务,并使用jmeter进行高并发测试。测试结果太差了,看... 查看详情

高并发下接口的并发问题

...会员,限制每个帐号只能领取一个有恶意用户刷接口,在高并发下越过限制。原因领取会员流程:1.后端先生成卡卷,将卡号放到消息队列中2.用户扫码请求领取会员接口2-1).先检查用户是否已经领取过该活动会员2-2).领取过return... 查看详情

缓存击穿

...访问频率↑↑2.读写比例   读多与少↑3.数据一致性 ↑↓二。什么是缓存击穿在高并发下,多线程同时查询同一个资源,如果缓存中没有这个资源,那么这些线程都会去数据库查找,对数据库造成极大压力,缓存失去存在... 查看详情

分布式事务,高并发下分布式事务的解决方案

...本质上来说,分布式事务就是为了保证不同数据库的数据一致性。2、分布式事务的产生的原因2.1、数据库分库分表当数据库单表一年产生的数据超过1000W,那么就要考虑分库分表,具体分库分表的原理在此不做解释,以后有空详... 查看详情

高并发下的static类成员可能存在安全隐患

有一个网友在高并发下使用下面的日期转换工具类时,遇到的问题publicclassDateUtil{privateDateUtil(){}privatestaticfinalDateFormatDATE_FORMAT=newSimpleDateFormat("yyyy-MM-ddHH:mm:ss");publicstaticDateparse(Stringdate)throwsParseExcept 查看详情

高并发下,hashmap会产生哪些问题?(代码片段)

HashMap在高并发环境下会产生的问题HashMap其实并不是线程安全的,在高并发的情况下,会产生并发引起的问题:比如:HashMap死循环,造成CPU100%负载触发fail-fast下面逐个分析下出现上述情况的原因:HashMap死循环的原因HashMap进行存... 查看详情

php和redis实现在高并发下的抢购及秒杀功能示例详解(代码片段)

...简单,但是有些问题需要解决,主要针对两个问题:一、高并发对数据库产生的压力二、竞争状态下如何解决库存的正确减少("超卖"问题)第一个问题,对于PHP来说很简单,用缓存技术就可以缓解数据库压力,比如memcache,redis... 查看详情

程序员修神之路--高并发下为什么更喜欢进程内缓存

菜菜哥,告诉你一个好消息YY妹子,什么好消息,你有男票了?不是啦,我做的一个网站,以前经常由于访问量太大而崩溃,现在我加上了缓存,很稳定啦加的什么缓存呢?我用的redis,号称业界最快的缓存组件了你觉得现在的... 查看详情

漫画:高并发下的hashmap(代码片段)

这一期我们来讲解高并发环境下,HashMap可能出现的致命问题。               HashMap的容量是有限的。当经过多次元素插入,使得HashMap达到一定饱和度时,Key映射位置发生冲突... 查看详情

高并发下线程安全的单例模式

...之一,而单例模式有很多种实现方式,你是否都了解呢?高并发下如何保证单例模式的线程安全性呢?如何保证序列化后的单例对象在反序列化后任然是单例的呢?这些问题在看了本文之后都会一一的告诉你答案,赶快来阅读吧... 查看详情

高并发下的web异步处理方案(代码片段)

高并发下的web异步处理方案一、问题介绍​平时web开发时(使用的servlet或者基于servlet封装的SpringMVC框架),业务处理基本都是同步处理,即业务处理与web容器接收线程为同一线程,每一次Http请求都由一个线... 查看详情

如何保障缓存和数据库的一致性(超详细案例)

...面试的常见题目,高并发下如何保障缓存和数据库的一致性,本文内容源于我在工作中的大量实际项目实践和思考。本文内容有视频版本,喜欢看视频的同学可以直接通过下面的二维码观看。如果你对文章的内容有疑... 查看详情

全网最全的高并发下常见的限流算法!(代码片段)

限流简介现在说到高可用系统,都会说到高可用的保护手段:缓存、降级和限流,本博文就主要说说限流。限流是流量限速(RateLimit)的简称,是指只允许指定的事件进入系统,超过的部分将被拒绝服... 查看详情

高并发下常见的限流算法都在这了!(代码片段)

限流简介现在说到高可用系统,都会说到高可用的保护手段:缓存、降级和限流,本博文就主要说说限流。限流是流量限速(RateLimit)的简称,是指只允许指定的事件进入系统,超过的部分将被拒绝服... 查看详情

高并发下如何保证接口的幂等性?

前言接口幂等性问题,对于开发人员来说,是一个跟语言无关的公共问题。本文分享了一些解决这类问题非常实用的办法,绝大部分内容我在项目中实践过的,给有需要的小伙伴一个参考。不知道你有没有遇到过... 查看详情