27.【学习心得】学习心得-如何更新redis缓存

本文涉及的产品
云原生内存数据库 Tair,内存型 2GB
云数据库 Redis 版,标准版 2GB
推荐场景:
搭建游戏排行榜
简介: 【学习心得】学习心得-如何更新redis缓存

文档参考:书名:《从程序员到架构师:大数据量、缓存、高并发、微服务、多团队协同等核心场景实战》-王伟杰

image.png

前文如下:


23.【学习心得】学习心得-冷热分离概述

24.【学习心得】学习心得-如何分离冷热数据

25.【学习心得】学习心得-基于MySQL的分表分库

26.【学习心得】学习心得-读缓存


1.如何更新缓存


更新缓存的步骤特别简单,共两步:更新数据库和更新缓存。但这简单的两步中需要考虑很多问题。

1)先更新数据库还是先更新缓存?更新缓存时先删除还是直接更新?

2)假设第一步成功了,第二步失败了怎么办?

3)假设两个线程同时更新同一个数据,A线程先完成第一步,B线程先完成第二步怎么办?


1.1 组合1:先更新缓存,再更新数据库


对于这个组合,会遇到这种情况:假设第二步更新数据库失败了,要求回滚缓存的更新,这时该怎么办呢?Redis不支持事务回滚,除非采用手工回滚的方式,先保存原有数据,然后再将缓存更新回原来的数据,这种解决方案有些缺陷。


1.1.1 缺陷


1)原来缓存中的值是a,两个线程同时更新库存。

2)线程A将缓存中的值更新成b,且保存了原来的值a,然后更新数据库。

3)线程B将缓存中的值更新成c,且保存了原来的值b,然后更新数据库。

4)线程A更新数据库时失败了,它必须回滚,那现在缓存中的值更新成什么呢?理论上应该更新成c,因为数据库中的值是c,但是,线程A里面无从获得c这个值。

image.png

缓存=a,数据库=a

线程A修改缓存为b,修改成功,缓存=b,本地原值=a,数据库=a

线程B修改缓存为c,修改成功,缓存=c,本地原值=b,数据库=a

线程B将数据库修改为c,修改成功,缓存=c,本地原值=b,数据库=c

线程A将数据库修改为b,修改失败,数据库回滚,数据库=c,本地原值=a,缓存回滚=原值a


1.1.2 总结


线程A更新,B线程更新:A线程先修改缓存,然后B线程快,把数据库和缓存都更新了;A更新数据库失败回滚,数据库回滚到B线程修改的值,缓存回滚到A线程原值,导致数据不一致


1.2 组合2:先删除缓存,再更新数据库


使用这种方案,即使更新数据库失败了也不需要回滚缓存。这种做法虽然巧妙规避了失败回滚的问题,却引出了两个更大的问题。


1.2.1 缺陷

1)假设线程A先删除缓存,再更新数据库。在线程A完成更新数据库之前,后执行的线程B反而超前完成了操作,读取Key发现没有数据后,将数据库中的旧值存放到了缓存中。线程A在线程B都完成后再更新数据库,这样就会出现缓存(旧值)与数据库的值(新值)不一致的问题

2)为了解决一致性问题,可以让线程A给Key加锁,也就是删除redis和更新库放在同一个事务操作里面,因为写操作特别耗时,这种处理方法会导致大量的读请求卡在锁中。

image.png


缓存=a,数据库=a

线程A删除缓存,删除成功,缓存=null,数据库=a

线程B读取缓存为null,读取数据库值=a更新到缓存,缓存=a,数据库=a

线程A将数据库修改为b,修改成功,缓存=a,数据库=b


1.2.2 总结


线程A更新,线程B读取:A线程删完后,数据库还没来得及更新;B线程又把数据库旧值更新到redis里,然后A线程更新数据库成功,导致这样缓存(旧值)与数据库的值(新值)不一致的问题


1.3 组合3:先更新数据库,再更新缓存


对于组合3,同样需要考虑两个问题。


1.3.1 缺陷


1)假设第一步(更新数据库)成功,第二步(更新缓存)失败了怎么办?因为缓存不是主流程,数据库才是,所以不会因为更新缓存失败而回滚第一步对数据库的更新。此时一般采取的做法是重试机制,但重试机制如果存在延时还是会出现数据库与缓存不一致的情况,不好处理。


image.png


缓存=a,数据库=a

线程A修改数据库为b,修改成功,缓存=a,数据库=b

线程A将缓存修改为b,修改失败,缓存=a,数据库=b

2)假设两个线程同时更新同一个数据,线程A先完成了第一步,线程B先完成了第二步怎么办?线程A把值更新成a,线程B把值更新成b,此时数据库中的最新值是b,因为线程A先完成了第一步,后完成第二步,所以缓存中的最新值是a,数据库与缓存的值还是不一致,这个逻辑还是有问题的。因此,也不建议采用这个组合。


image.png


缓存=a,数据库=a

线程A修改数据库为b,修改成功,缓存=a,数据库=b

线程B修改数据库为c,修改成功,缓存=a,数据库=c

线程B将缓存修改为c,修改成功,缓存=c,数据库=c

线程B将缓存修改为b,修改成功,缓存=b,数据库=c


1.3.1 总结


场景1:线程A更新,B线程读取:A线程数据库更新成功,缓存更新失败,数据不一致,可以增加重试。但是重试过程中线程B读到旧的缓存数据

场景2:线程A更新,B线程更新:A线程数据库更新成功,然后B线程数据库和缓存先更新完;然后A线程才更新成功缓存;导致缓存存的A线程修改值,数据库存的B线程修改值,数据不一致


1.4 组合4:先更新数据库,再删除缓存


针对组合4,先看看它能不能解决组合3的第二个问题。假设两个线程同时更新同一个数据,线程A先完成第一步,线程B先完成第二步怎么办?线程A把值更新成b,线程B把值更新成c,此时数据库中的最新值是c,因为线程A先完成了第一步,所以第二步谁先完成已经不重要了,因为都是直接删除缓存数据。这个问题解决了。


image.png


缓存=a,数据库=a

线程A修改数据库为b,修改成功,缓存=a,数据库=b

线程B修改数据库为c,修改成功,缓存=a,数据库=c

线程B将缓存删除,删除成功,缓存=null,数据库=c

线程A将缓存删除,删除成功,缓存=null,数据库=c


那么,它能解决组合3的第一个问题吗?假设第一步成功,第二步失败了怎么办?这种情况的出现概率与组合3相比明显低不少,因为删除比更新容易多了。虽然这个组合方案不完美,但出现一致性问题的概率较低。除了组合3会碰到的问题,组合4还会碰到别的问题吗?


是的。假设线程A要更新数据,先完成第一步更新数据库,在线程A删除缓存之前,线程B要访问缓存,那么取得的就是旧数据。这是一个小小的缺陷。


image.png


缓存=a,数据库=a

线程A修改数据库为b,修改成功,缓存=a,数据库=b

线程B读取缓存,读到缓存=a,数据库=b

线程A将缓存删除,删除成功,缓存=null,数据库=b


1.4.2 总结


场景1:线程A更新,B线程读取:A线程数据库更新成功,缓存删除不是同一个事务中(失败概率较低),B线程会读数据库最新的值到缓存;但是A线程数据库更新和缓存删除不是同一个事务中,B线程读到的缓存和数据库不一致,此场景概率较小


场景2:线程A更新,B线程更新:最终缓存都是null,其他线程读取都得读一次库再更新到缓存。

那么,以上问题有办法解决吗?


1.5 组合5:先删除缓存,更新数据库,再删除缓存(延迟双删)


还有一个方案,就是先删除缓存,再更新数据库,再删除缓存。这个方案其实和先更新数据库,再删除缓存差不多,因为还是会出现类似的问题:假设线程A要更新数据库,先删除了缓存,这一瞬间线程B要读缓存,先把数据迁移到缓存;然后线程A完成了更新数据库的操作,这一瞬间线程C也要访问缓存,此时它访问到的就是线程C放到缓存里面的旧数据


image.png



缓存=a,数据库=a

线程A删除缓存,删除成功,缓存=null,数据库=a

线程B读取缓存为null,读取数据库值=a更新到缓存,缓存=a,数据库=a

线程A将数据库修改为b,修改成功,缓存=a,数据库=b

线程C读取缓存,读取成功,缓存=a,数据库=b


不过组合5出现类似问题的概率更低,因为要刚好有3个线程配合才会出现问题(比先更新数据库,再删除缓存的方案多了一个需要配合的线程)。但是相比于组合4,组合5规避了第二步删除缓存失败的问题——组合5是先删除缓存,再更新数据库,假设它的第三步“再删除缓存”失败了,也没关系,因为缓存已经删除了。 其实没有一个组合是完美的,它们都有读到脏数据(这里指旧数据)的可能性,只不过概率不同。根据以上分析,组合5相对来说是比较好的选择。


1.5.1 缺陷


不过这个组合也有一些问题要考虑,具体如下。


1)删除缓存数据后变相出现缓存击穿,此时该怎么办?

2)删除缓存失败如何重试?这个重试可以做得复杂一点,也可以做得简单一点。简单一点就是使用try…catch…,假设删除缓存失败了,在catch里面重试一次即可;复杂一点就是使用一个异步线程不断重试,甚至用到MQ。不过这里没有必要大动干戈。而且异步重试的延时大,会带来更多的读脏数据的可能性。所以仅仅同步重试一次就可以了。

3)不可避免的脏数据问题。虽然这个问题在组合5中出现的概率已经大大降低了,但是还是有的。关于这一点就需要与业务沟通,毕竟这种情况比较少见,可以根据实际业务情况判断是否需要解决这个瑕疵。


1.5.2 总结


延时双删,有等待环节,如果系统要求低延时,这种场景就不合适了。 延时双删,不适合“秒杀”这种频繁修改数据和要求数据强一致的场景。 延时双删,延时时间是一个预估值,不能确保 mysql 和 redis 数据在这个时间段内都实时同步或持久化成功了。



相关实践学习
基于Redis实现在线游戏积分排行榜
本场景将介绍如何基于Redis数据库实现在线游戏中的游戏玩家积分排行榜功能。
云数据库 Redis 版使用教程
云数据库Redis版是兼容Redis协议标准的、提供持久化的内存数据库服务,基于高可靠双机热备架构及可无缝扩展的集群架构,满足高读写性能场景及容量需弹性变配的业务需求。 产品详情:https://www.aliyun.com/product/kvstore     ------------------------------------------------------------------------- 阿里云数据库体验:数据库上云实战 开发者云会免费提供一台带自建MySQL的源数据库 ECS 实例和一台目标数据库 RDS实例。跟着指引,您可以一步步实现将ECS自建数据库迁移到目标数据库RDS。 点击下方链接,领取免费ECS&RDS资源,30分钟完成数据库上云实战!https://developer.aliyun.com/adc/scenario/51eefbd1894e42f6bb9acacadd3f9121?spm=a2c6h.13788135.J_3257954370.9.4ba85f24utseFl
相关文章
|
6天前
|
canal 缓存 NoSQL
Redis缓存与数据库如何保证一致性?同步删除+延时双删+异步监听+多重保障方案
根据对一致性的要求程度,提出多种解决方案:同步删除、同步删除+可靠消息、延时双删、异步监听+可靠消息、多重保障方案
Redis缓存与数据库如何保证一致性?同步删除+延时双删+异步监听+多重保障方案
|
7天前
|
存储 NoSQL Redis
SpringCloud基础7——Redis分布式缓存,RDB,AOF持久化+主从+哨兵+分片集群
Redis持久化、RDB和AOF方案、Redis主从集群、哨兵、分片集群、散列插槽、自动手动故障转移
SpringCloud基础7——Redis分布式缓存,RDB,AOF持久化+主从+哨兵+分片集群
|
17天前
|
缓存 NoSQL 关系型数据库
MySQL与Redis缓存一致性的实现与挑战
在现代软件开发中,MySQL作为关系型数据库管理系统,广泛应用于数据存储;而Redis则以其高性能的内存数据结构存储特性,常被用作缓存层来提升数据访问速度。然而,当MySQL与Redis结合使用时,确保两者之间的数据一致性成为了一个重要且复杂的挑战。本文将从技术角度分享MySQL与Redis缓存一致性的实现方法及其面临的挑战。
41 2
|
19天前
|
Java UED Maven
紧跟技术潮流:手把手教你构建响应式Vaadin应用,让用户体验无缝接轨!
【8月更文挑战第31天】本文从零开始,详细介绍如何使用强大的Java框架Vaadin构建流畅且响应式的Web应用程序。首先,确保安装JDK 1.8+、Maven 3.3.9+及IDE。接着,创建Maven项目并添加Vaadin依赖。然后,通过继承`UI`类创建主界面,并定义自定义主题与样式。利用Vaadin的响应式布局组件,如`HorizontalLayout`和`VerticalLayout`,实现多设备兼容性。
27 0
|
19天前
|
缓存 NoSQL Redis
Entity Framework Core 与 Redis 强强联手!实现高速缓存,提升应用性能超厉害
【8月更文挑战第31天】在现代应用开发中,结合 Entity Framework Core 与 Redis 可显著提升数据访问速度。Entity Framework Core 是一个强大的 ORM 框架,但处理频繁访问的数据时可能遇到性能瓶颈。Redis 作为高性能内存数据库,具备快速读写能力。两者结合利用 Redis 高速缓存,减少直接数据库访问,提高应用响应速度及性能。
31 0
|
存储 缓存 NoSQL
Spring Boot2.5 实战 MongoDB 与高并发 Redis 缓存|学习笔记
快速学习 Spring Boot2.5 实战 MongoDB 与高并发 Redis 缓存
Spring Boot2.5 实战 MongoDB 与高并发 Redis 缓存|学习笔记
|
缓存 NoSQL 安全
6.0Spring Boot 2.0实战 Redis 分布式缓存6.0|学习笔记
快速学习6.0Spring Boot 2.0实战 Redis 分布式缓存6.0。
311 0
6.0Spring Boot 2.0实战 Redis 分布式缓存6.0|学习笔记
|
缓存 NoSQL Redis
首页数据显示-添加 redis 缓存(3)| 学习笔记
快速学习 首页数据显示-添加 redis 缓存(3)
138 0
首页数据显示-添加 redis 缓存(3)| 学习笔记
|
缓存 NoSQL Java
首页数据显示-添加 redis 缓存(1) | 学习笔记
快速学习 首页数据显示-添加 redis 缓存(1)
220 0
首页数据显示-添加 redis 缓存(1) | 学习笔记
|
存储 缓存 NoSQL
Redis 缓存|学习笔记
快速学习Redis 缓存
100 0