我的编程空间,编程开发者的网络收藏夹
学习永远不晚

Redis作为缓存,mysql的数据如何与redis进行同步?

短信预约 -IT技能 免费直播动态提醒
省份

北京

  • 北京
  • 上海
  • 天津
  • 重庆
  • 河北
  • 山东
  • 辽宁
  • 黑龙江
  • 吉林
  • 甘肃
  • 青海
  • 河南
  • 江苏
  • 湖北
  • 湖南
  • 江西
  • 浙江
  • 广东
  • 云南
  • 福建
  • 海南
  • 山西
  • 四川
  • 陕西
  • 贵州
  • 安徽
  • 广西
  • 内蒙
  • 西藏
  • 新疆
  • 宁夏
  • 兵团
手机号立即预约

请填写图片验证码后获取短信验证码

看不清楚,换张图片

免费获取短信验证码

Redis作为缓存,mysql的数据如何与redis进行同步?

Redis作为缓存,mysql的数据如何与redis进行同步?

一定要设置前提,先介绍业务背景

延时双删

  • 双写一致性:当修改了数据库的数据也要同时更新缓存的数据,缓存和数据库的数据要保持一致
    • 读操作:缓存命中,直接返回;缓存未命中查询数据库,写入缓存,设定超时时间
    • 写操作:延时双删
      • 在这里插入图片描述

问题来了,那么先删除数据库,还是先删除缓存呢?我们都分析一下,这里只分析异常情况

  • 先删除缓存,再删除数据库。假设我们有缓存数据A=10,和数据库数据A=10

    • 线程1先删除缓存
    • 此时线程2查询缓存,未命中,查询数据库A=10,然后写入缓存
    • 线程1然后更新数据库A=20
    • 此时数据不一致了缓存A=10,数据库A=20
      • 在这里插入图片描述
  • 先操作数据库,再删除缓存,假设我们有缓存数据已经过期,和数据库数据A=10

    • 线程1先查询缓存,此时因为我们假设的缓存数据已经过期,查询数据库A=10,还没来得及写入缓存
    • 线程2更新数据库,A=20,然后删除缓存(此时没有缓存,删不删没关系)
    • 线程1写入缓存
    • 此时数据不一致了,缓存A=10,数据库A=20
      • 在这里插入图片描述

我们发现这两种都会导致脏数据的出现,所以,删除两次缓存就出现了。这就是延时双删:删除缓存-修改数据库-延迟一会删除缓存,就是为了降低脏数据的出现,那为什么要延时呢?因为一般情况下,数据库是主从模式,我们要延时一会,让数据库主节点同步到从节点,再删除缓存。但是也会有小问题,因为延时的时间不好把控。所以做不到绝对的强一致。

分布式锁

那有更好的办法吗?我们可以使用分布式锁来解决这个问题

在这里插入图片描述

但是这个显然效率有点太低了,我们可以优化一下

一般缓存数据都是读多写少,我们可以使用读写锁控制

  • 共享锁:读锁readLock,加锁之后,其他线程可以共享读操作排他锁
  • 独占锁writeLock也叫,加锁之后,阻塞其他线程读写操作

这样性能就得到了提升,虽然实现了强一致,但是性能还是有点低

异步通知保证数据最终一致

在这里插入图片描述

最终一致性的保证,主要取决于MQ的可靠性

基于Canal的异步通知

在这里插入图片描述

canal是阿里开发的中间件,主要是基于mysql的主从同步实现的

二进制日志(BNLOG)记录了所有的DDL (数据定义语言)语句和DML(数据操纵语言)语句,但不包括数据查询(SELECT、SHOW)语句。

优点:无代码侵入

总结

  • 允许延时一致的业务,采用异步通知
    • 使用MQ中间中间件,更新数据之后,通知缓存删除
    • 利用canal中间件,不需要修改业务代码,伪装为mysql的一个从节点,canal通过读取binlog数据更新缓
  • 存强一致性的,采用Redisson提供的读写锁
    • 共享锁:读锁readLock,加锁之后,其他线程可以共享读操作排他锁
  • 存强一致性的,采用Redisson提供的读写锁
    • 共享锁:读锁readLock,加锁之后,其他线程可以共享读操作排他锁
    • 独占锁writeLock也叫,加锁之后,阻塞其他线程读写操作

来源地址:https://blog.csdn.net/m0_65778338/article/details/133562880

免责声明:

① 本站未注明“稿件来源”的信息均来自网络整理。其文字、图片和音视频稿件的所属权归原作者所有。本站收集整理出于非商业性的教育和科研之目的,并不意味着本站赞同其观点或证实其内容的真实性。仅作为临时的测试数据,供内部测试之用。本站并未授权任何人以任何方式主动获取本站任何信息。

② 本站未注明“稿件来源”的临时测试数据将在测试完成后最终做删除处理。有问题或投稿请发送至: 邮箱/279061341@qq.com QQ/279061341

Redis作为缓存,mysql的数据如何与redis进行同步?

下载Word文档到电脑,方便收藏和打印~

下载Word文档

猜你喜欢

Redis做为缓存,MySQL如何与Redis保持数据一致性?

一般情况下Redis是用来实现应用和数据库之间的一个读操作的缓存层,主要目的是减少数据库的io,还可以提升数据库io性能
Redis数据库2024-11-30

浅谈MySQL数据同步到Redis缓存的几种方法

本文主要介绍了浅谈MySQL数据同步到Redis缓存的几种方法,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧
2023-03-19

浅谈MySQL数据同步到 Redis 缓存的几种方法

目录1 mysql查完数据,再同步写入到Redis中2 Mysql查完数据,通过发送MQ,在消费者线程去同步Redis3 订阅Mysql的Binlog文件(可借助Canal来进行)4 延迟双删5 延迟双写6 总结1 Mysql查完数据,再同
2023-03-19

如何使用MySQL进行跨数据库的数据同步?

如何使用MySQL进行跨数据库的数据同步?在现代的软件开发中,数据库的使用无处不在。而随着软件项目的增长,数据的同步和备份变得越来越重要。MySQL是一个强大的关系型数据库管理系统,同时也提供了一些可靠的方法来实现跨数据库的数据同步。本文将
2023-10-22

如何在Storm中与外部存储系统进行交互和数据同步

在Storm中与外部存储系统进行交互和数据同步通常可以通过以下几种方式实现:使用Storm的Kafka连接器:Storm提供了与Kafka集成的连接器,可以将Storm拓扑的输出数据发送到Kafka中,然后再从Kafka中读取数据进行存储或
如何在Storm中与外部存储系统进行交互和数据同步
2024-04-09

Redis可视化工具如何进行数据备份与恢复?(redis可视化工具的数据备份与恢复)

在当今的数据管理领域,Redis作为一款高性能的键值存储数据库,被广泛应用于各种场景。而Redis可视化工具则为用户提供了更便捷的操作界面和管理功能。其中,数据备份与恢复是Redis管理的重要环节之一。本文将详细介绍Redis可视化工具的数据备份与恢复方法。
Redis可视化工具如何进行数据备份与恢复?(redis可视化工具的数据备份与恢复)
Java2024-12-18

如何使用PHP连接和操作Redis数据库?(PHP连接Redis并进行数据读写的方式是什么?)

本文介绍了如何使用PHP连接和操作Redis数据库。它涵盖了连接、读写字符串、哈希、列表、集合和有序集合等基本操作。还讨论了事务和管道等高级功能。本文提供了详细的代码示例,展示了如何使用PredisClient类与Redis数据库进行交互。通过将PHP与Redis相结合,开发人员可以轻松地创建具有高性能和可扩展性的实际应用程序。
如何使用PHP连接和操作Redis数据库?(PHP连接Redis并进行数据读写的方式是什么?)
2024-04-02

Python中如何建立与MySQL数据库的安全连接并进行数据交互?(如何使用Python安全地连接到MySQL数据库并执行数据操作?)

本文章详细讲解了如何使用Python安全地连接MySQL数据库并进行数据操作。为了建立安全连接,需配置数据库访问权限、使用SSL加密和密码。Python中的连接配置可通过mysql.connector库实现。数据交互操作包括创建游标、执行查询、获取结果、修改数据和提交更改。安全性最佳实践建议遵循最小权限原则、定期更改密码、使用防火墙、IDS和保持软件更新。
Python中如何建立与MySQL数据库的安全连接并进行数据交互?(如何使用Python安全地连接到MySQL数据库并执行数据操作?)
2024-04-02

Python中如何对MySQL数据库进行备份和恢复操作?(通过Python如何实现MySQL数据库的备份与恢复?)

本文介绍了如何使用PythonMySQLdb库对MySQL数据库进行备份和恢复。备份涉及导出数据库到文件,而恢复涉及从文件导入数据库。自动化过程可以使用调度器(如cron)来安排定期备份和恢复。本文提供了详细的步骤和代码示例,使读者能够轻松地实施这些操作,确保数据的安全性和完整性。
Python中如何对MySQL数据库进行备份和恢复操作?(通过Python如何实现MySQL数据库的备份与恢复?)
2024-04-02

编程热搜

目录