我的编程空间,编程开发者的网络收藏夹
学习永远不晚

Redis 和 MySQL 如何保持数据一致性?

短信预约 -IT技能 免费直播动态提醒
省份

北京

  • 北京
  • 上海
  • 天津
  • 重庆
  • 河北
  • 山东
  • 辽宁
  • 黑龙江
  • 吉林
  • 甘肃
  • 青海
  • 河南
  • 江苏
  • 湖北
  • 湖南
  • 江西
  • 浙江
  • 广东
  • 云南
  • 福建
  • 海南
  • 山西
  • 四川
  • 陕西
  • 贵州
  • 安徽
  • 广西
  • 内蒙
  • 西藏
  • 新疆
  • 宁夏
  • 兵团
手机号立即预约

请填写图片验证码后获取短信验证码

看不清楚,换张图片

免费获取短信验证码

Redis 和 MySQL 如何保持数据一致性?

在高并发的场景下,大量的请求直接访问MySQL很容易造成性能问题。所以,我们都会用Redis来做数据的缓存,削减对数据库的请求。但是,MySQL和Redis是两种不同的数据库,如何保证不同数据库之间数据的一致性就非常关键了。

  1. 在高并发的业务场景下,数据库大多数情况都是用户并发访问最薄弱的环节。所以,就需要使用redis做一个缓冲操作,让请求先访问到redis,而不是直接访问MySQL等数据库;
  2. 读取缓存步骤一般没有什么问题,但是一旦涉及到数据更新,数据库和缓存更新,就容易出现缓存(Redis)和数据库(MySQL)间的数据一致性问题;
  3. 这个业务场景,主要是解决读数据从Redis缓存,一般都是按照下图的流程来进行业务操作。

不管是先写MySQL数据库,再删除Redis缓存;还是先删除缓存,再写库,都有可能出现数据不一致的情况。

1. 先删除缓存

        1)、如果先删除Redis缓存数据,然而还没有来得及写入MySQL,另一个线程就来读取;

        2)、这个时候发现缓存为空,则去Mysql数据库中读取旧数据写入缓存,此时缓存中为脏数据;

        3)、然后数据库更新后发现Redis和Mysql出现了数据不一致的问题。

2. 后删除缓存

        1)、如果先写了库,然后再删除缓存,不幸的写库的线程挂了,导致了缓存没有删除;

        2)、这个时候就会直接读取旧缓存,最终也导致了数据不一致情况;

        3)、因为写和读是并发的,没法保证顺序,就会出现缓存和数据库的数据不一致的问题。

更多内容请关注公众号【程序员Style】,获取更多精彩内容!

1. 延时双删策略

1). 基本思路

在写库前后都进行redis.del(key)操作,并且设定合理的超时时间。

伪代码如下:

public void write( String key, Object data ){    redis.delKey(key);    db.updateData(data);     Thread.sleep(500);    redis.delKey(key);}

2). 具体步骤

  • 先删除缓存;
  • 再写数据库;
  • 休眠500毫秒;
  • 再次删除缓存。

问题:这个500毫秒怎么确定的,具体该休眠多久时间呢?

  • 需要评估自己的项目的读数据业务逻辑的耗时。
  • 这么做的目的,就是确保读请求结束,写请求可以删除读请求造成的缓存脏数据。
  • 当然这种策略还要考虑redis和数据库主从同步的耗时。
  • 最后的的写数据的休眠时间:则在读数据业务逻辑的耗时基础上,加几百ms即可。

    比如:休眠1秒。

3). 设置缓存过期时间是关键点

  • 从理论上来说,给缓存设置过期时间,是保证最终一致性的解决方案;
  • 所有的写操作以数据库为准,只要到达缓存过期时间,缓存删除;
  • 如果后面还有读请求的话,就会从数据库中读取新值然后回填缓存。

4). 方案缺点

    结合双删策略+缓存超时设置,这样最差的情况就是:

  • 在缓存过期时间内发生数据存在不一致;
  • 同时又增加了写请求的耗时。

2. 异步更新缓存(基于Mysql binlog的同步机制)

1). 整体思路

        1>、涉及到更新的数据操作,利用Mysql binlog 进行增量订阅消费;

        2>、将消息发送到消息队列;

        3>、通过消息队列消费将增量数据更新到Redis上。

2). 操作情况

  • 读取Redis缓存:热数据都在Redis上;

  • 写Mysql:增删改都是在Mysql进行操作;

  • 更新Redis数据:Mysql的数据操作都记录到binlog,通过消息队列及时更新到Redis上。

3). Redis更新过程

        数据操作主要分为两种:

        1>、一种是全量(将所有数据一次性写入Redis);

        2>、一种是增量(实时更新)。

这里说的是增量,指的是mysql的update、insert、delate变更数据。

读取binlog后分析 ,利用消息队列,推送更新各台的redis缓存数据。

        1>、这样一旦MySQL中产生了新的写入、更新、删除等操作,就可以把binlog相关的消息推送至Redis;

        2>、Redis再根据binlog中的记录,对Redis进行更新;

        3>、其实这种机制,很类似MySQL的主从备份机制,因为MySQL的主备也是通过binlog来实现的数据一致性。

这里的消息推送工具你也可以采用别的第三方:kafka、rabbitMQ等来实现推送更新Redis!

在高并发应用场景下,如果是对数据一致性要求高的情况下,要定位好导致数据和缓存不一致的原因。

解决高并发场景下数据一致性的方案有两种,分别是延时双删策略和异步更新缓存两种方案。

另外,设置缓存的过期时间是保证数据保持一致性的关键操作,需要结合业务进行合理的设置。

 

来源地址:https://blog.csdn.net/dreaming317/article/details/129844613

免责声明:

① 本站未注明“稿件来源”的信息均来自网络整理。其文字、图片和音视频稿件的所属权归原作者所有。本站收集整理出于非商业性的教育和科研之目的,并不意味着本站赞同其观点或证实其内容的真实性。仅作为临时的测试数据,供内部测试之用。本站并未授权任何人以任何方式主动获取本站任何信息。

② 本站未注明“稿件来源”的临时测试数据将在测试完成后最终做删除处理。有问题或投稿请发送至: 邮箱/279061341@qq.com QQ/279061341

Redis 和 MySQL 如何保持数据一致性?

下载Word文档到电脑,方便收藏和打印~

下载Word文档

猜你喜欢

Redis和MySQL如何保持数据一致性?

Mysql和Redis是两种不同的数据库,如何保证不同数据库之间数据的一致性就非常关键了。

MySQL和Redis如何保证数据一致性

MySQL与Redis都是常用的数据存储和缓存系统。为了提高应用程序的性能和可伸缩性,很多应用程序将MySQL和Redis一起使用,其中MySQL作为主要的持久存储,而Redis作为主要的缓存。在这种情况下,应用程序需要确保MySQL和Re
2023-08-22

Redis 和 MySQL 如何保证数据一致性?

启动一个订阅程序去订阅数据库的binlog,获得需要操作的数据。在应用程序中,另起一段程序,获得这个订阅程序传来的信息,进行删除缓存操作。

如何保证MySQL和Redis的数据一致性?

今天给大家剖析一下工作中常见的 MySQL 和 Redis 数据一致性问题。

如何保障 MySQL 和 Redis 的数据一致性?

在满足实时性的条件下,MySQL 和 Redis 不存在两者完全保存一致的方案,只有最终一致性方案。

Redis做为缓存,MySQL如何与Redis保持数据一致性?

一般情况下Redis是用来实现应用和数据库之间的一个读操作的缓存层,主要目的是减少数据库的io,还可以提升数据库io性能
Redis数据库2024-11-30

redis怎么和数据库保持一致性

在实际应用中,Redis通常作为数据库的缓存层来提高访问速度,而不是直接用来和数据库保持一致性。但是如果确实需要保持Redis和数据库的一致性,可以通过以下几种方式实现:使用消息队列:在数据更新时,先更新数据库,然后再通过消息队列将更新操作
redis怎么和数据库保持一致性
2024-04-03

redis和mysql如何保证一致性

保证 redis 和 mysql 一致性的方法有直接写入 mysql 和事务补偿机制:直接写入 mysql:通过触发器将 mysql 数据变更同步到 redis,保证一致性但性能较低;事务补偿机制:先写入 redis,同时记录补偿事务,容忍
redis和mysql如何保证一致性
2024-04-20

redis和数据库如何保证一致性

redis 与数据库之间的数据一致性可以通过以下机制实现:1. 主从复制机制,通过异步复制实现一致性;2. 双写机制,同时向 redis 和数据库写入数据保持同步;3. 乐观锁,通过版本号或时间戳控制并发访问保证一致性;4. 事务补偿机制,
redis和数据库如何保证一致性
2024-04-20

redis怎样保持和数据库数据的一致性

redis 与数据库数据一致性维护可以通过以下方式实现:定期数据同步使用 redis 发布/订阅机制使用 redis 事务使用 redis 持久化使用 redis sentinel 或 redis cluster注意事项包括:同步频率、数据
redis怎样保持和数据库数据的一致性
2024-04-19

redis和mysql数据一致性怎么保证

为了确保 redis 和 mysql 之间的数据一致性,可以采用以下策略:1. 主从复制:利用 mysql 的复制功能,将 mysql 作为主数据库,并将数据同步到 redis 作为从数据库。2. 事务队列:将更新请求发送到事务队列,由消费
redis和mysql数据一致性怎么保证
2024-04-08

redis如何保证数据一致性

Redis 保证数据一致性的方法主要有以下几种:主从复制:Redis 支持主从复制机制,通过将主节点的数据复制到备用的从节点上,保证数据的一致性。当主节点发生故障时,从节点可以顶替主节点继续提供服务。数据持久化:Redis 支持将内存中的数
redis如何保证数据一致性
2024-05-10

redis如何保证和数据库的一致性

为了确保 redis 与数据库之间的数据一致性,可使用以下方法:事务性更新:将 redis 和数据库更新封装成原子事务,避免不一致。乐观锁:监视要更新的键,更新前检查键是否已修改,避免并发冲突。发布-订阅:使用 redis 频道发布消息,订
redis如何保证和数据库的一致性
2024-04-20

redis如何保证缓存和数据库一致性

redis 通过五种机制维护缓存一致性:1. 写通过缓存,2. 定期同步,3. 事务支持,4. 发布-订阅,5. 校验和修复。选择机制取决于数据变更频率、数据一致性要求、应用性能和维护成本等因素。Redis如何实现缓存一致性Redis作为
redis如何保证缓存和数据库一致性
2024-04-20

mysql与redis如何保证数据一致

MySQL和Redis是两种不同类型的数据库,它们在数据存储和数据处理方面有一些不同之处。在将它们结合使用时,需要考虑如何保证数据一致性。一种常见的方法是使用事务来确保数据的一致性。在MySQL中,可以使用事务来保证数据库操作的原子性、一
mysql与redis如何保证数据一致
2024-04-18

编程热搜

目录