我的编程空间,编程开发者的网络收藏夹
学习永远不晚

如何进行分库分表中多数据源的事务处理

短信预约 -IT技能 免费直播动态提醒
省份

北京

  • 北京
  • 上海
  • 天津
  • 重庆
  • 河北
  • 山东
  • 辽宁
  • 黑龙江
  • 吉林
  • 甘肃
  • 青海
  • 河南
  • 江苏
  • 湖北
  • 湖南
  • 江西
  • 浙江
  • 广东
  • 云南
  • 福建
  • 海南
  • 山西
  • 四川
  • 陕西
  • 贵州
  • 安徽
  • 广西
  • 内蒙
  • 西藏
  • 新疆
  • 宁夏
  • 兵团
手机号立即预约

请填写图片验证码后获取短信验证码

看不清楚,换张图片

免费获取短信验证码

如何进行分库分表中多数据源的事务处理

这期内容当中小编将会给大家带来有关如何进行分库分表中多数据源的事务处理,文章内容丰富且以专业的角度为大家分析和叙述,阅读完这篇文章希望大家可以有所收获。

系统经sharding改造之后,原来单一的数据库会演变成多个数据库,如何确保多数据源同时操作的原子性和一致性是不得不考虑的一个问题。总体上看,目前对于一个分布式系统的事务处理有三种方式:分布式事务、基于Best  Efforts 1PC模式的事务以及事务补偿机制。我们下面对这三种处理方式一一进行分析。

分布式事务

这是最为人们所熟知的多数据源事务处理机制。本文并不打算对分布式事务做过多介绍,读者可参考此文:关于分布式事务、两阶段提交、一阶段提交、Best  Efforts 1PC模式和事务补偿机制的研究 。在这里只想对分布式事务的利弊作一下分析。

优势:

1. 基于两阶段提交,最大限度地保证了跨数据库操作的“原子性”,是分布式系统下最严格的事务实现方式。

2.  实现简单,工作量小。由于多数应用服务器以及一些独立的分布式事务协调器做了大量的封装工作,使得项目中引入分布式事务的难度和工作量基本上可以忽略不计。

劣势:

系统“水平”伸缩的死敌。基于两阶段提交的分布式事务在提交事务时需要在多个节点之间进行协调,***限度地推后了提交事务的时间点,客观上延长了事务的执行时间,这会导致事务在访问共享资源时发生冲突和死锁的概率增高,随着数据库节点的增多,这种趋势会越来越严重,从而成为系统在数据库层面上水平伸缩的”枷锁”,  这是很多Sharding系统不采用分布式事务的主要原因。

基于Best Efforts 1PC模式的事务

与分布式事务采用的两阶段提交不同,Best Efforts  1PC模式采用的是一阶段端提交,牺牲了事务在某些特殊情况(当机、网络中断等)下的安全性,却获得了良好的性能,特别是消除了对水平伸缩的桎酷。Distributed  transactions in Spring, with and without XA一文对Best Efforts  1PC模式进行了详细的说明,该文提供的Demo代码更是直接给出了在Spring环境下实现一阶段提交的多数据源事务管理示例。不过需要注意的是,原示例是基于spring  3.0之前的版本,如果你使用spring 3.0+,会得到如下错误:java.lang.IllegalStateException: Cannot  activate transaction synchronization – already active,如果使用spring  3.0+,你需要参考spring-data-neo4j的实现。鉴于Best Efforts  1PC模式的性能优势,以及相对简单的实现方式,它被大多数的sharding框架和项目采用。

事务补偿机制

对于那些对性能要求很高,但对一致性要求并不高的系统,往往并不苛求系统的实时一致性,只要在一个允许的时间周期内达到最终一致性即可,这使得事务补偿机制成为一种可行的方案。事务补偿机制最初被提出是在“长事务”的处理中,但是对于分布式系统确保一致性也有很好的参考意义。笼统地讲,与事务在执行中发生错误后立即回滚的方式不同,事务补偿是一种事后检查并补救的措施,它只期望在一个容许时间周期内得到最终一致的结果就可以了。事务补偿的实现与系统业务紧密相关,并没有一种标准的处理方式。一些常见的实现方式有:对数据进行对帐检查;基于日志进行比对;定期同标准数据来源进行同步,等等。

分布式事务,最严格的事务实现,但性能是个大问题;Best Efforts  1PC模式,性能与事务可靠性的平衡,支持系统水平伸缩,大多数情况下是最合适的选择;事务补偿机制,只能适用于对事务性要求不高,允许数据“最终一致”即可的系统,牺牲实时一致性,获得最大的性能回报。

上述就是小编为大家分享的如何进行分库分表中多数据源的事务处理了,如果刚好有类似的疑惑,不妨参照上述分析进行理解。如果想知道更多相关知识,欢迎关注亿速云行业资讯频道。

免责声明:

① 本站未注明“稿件来源”的信息均来自网络整理。其文字、图片和音视频稿件的所属权归原作者所有。本站收集整理出于非商业性的教育和科研之目的,并不意味着本站赞同其观点或证实其内容的真实性。仅作为临时的测试数据,供内部测试之用。本站并未授权任何人以任何方式主动获取本站任何信息。

② 本站未注明“稿件来源”的临时测试数据将在测试完成后最终做删除处理。有问题或投稿请发送至: 邮箱/279061341@qq.com QQ/279061341

如何进行分库分表中多数据源的事务处理

下载Word文档到电脑,方便收藏和打印~

下载Word文档

猜你喜欢

如何使用Python中的数据分析库进行数据处理

如何使用Python中的数据分析库进行数据处理人们越来越重视数据处理和分析的重要性。随着电子设备的不断普及和互联网的发展,我们每天都会产生大量的数据。要从这些海量的数据中提取有用的信息和洞察,就需要使用强大的工具和技术。Python作为一种
2023-10-22

Spring Boot多数据源处理事务实例分析

这篇“Spring Boot多数据源处理事务实例分析”文章的知识点大部分人都不太理解,所以小编给大家总结了以下内容,内容详细,步骤清晰,具有一定的借鉴价值,希望大家阅读完这篇文章能有所收获,下面我们一起来看看这篇“Spring Boot多数
2023-06-30

Aurora数据库中怎么进行事务处理

Aurora数据库支持事务处理,可以使用以下步骤在Aurora数据库中进行事务处理:开始事务:使用BEGIN语句开始一个新的事务。执行SQL语句:在事务中执行需要进行的SQL语句,例如插入、更新或删除数据等操作。提交事务:当所有操作完成后,
Aurora数据库中怎么进行事务处理
2024-04-09

如何在Oracle数据库中进行事务管理

在Oracle数据库中进行事务管理可以通过以下步骤实现:开始事务:在执行需要进行事务管理的操作之前,使用BEGIN TRANSACTION或者START TRANSACTION语句开始一个新的事务。执行SQL语句:在事务内部执行需要进行事务
如何在Oracle数据库中进行事务管理
2024-04-09

PHP中的事务处理是如何实现的?(请解释PHP中进行数据库事务处理的步骤。)

PHP中事务处理可确保数据库操作要么全部成功执行,要么全部回滚失败。它通过开始事务、执行操作、提交或回滚事务以及异常处理来实现。PHP事务处理遵循ACID属性,包括原子性、一致性、隔离性和持久性。最佳实践包括只在需要时使用事务,保持事务简洁,避免复杂操作,并始终处理异常以防止数据不一致。
PHP中的事务处理是如何实现的?(请解释PHP中进行数据库事务处理的步骤。)
2024-04-02

数据库分库分表之后,你是如何解决事务问题?

我们需要接受失望,因为它是有限的;我们不会失去希望,因为它是无穷的。一、概述随着时间和业务的发展,数据库中表的数据量会越来越大,相应地,数据操作,增删改查的开销也会越来越大。因此,把其中一些大表进行拆分到多个数据库中的多张表中。本篇文章是基于非事务消息的异步确
数据库分库分表之后,你是如何解决事务问题?
2017-12-10

如何通过AmazonAurora实现数据库的分布式事务处理

Amazon Aurora是一个关系型数据库服务,其支持分布式事务处理。要通过Amazon Aurora实现数据库的分布式事务处理,可以按照以下步骤进行操作:使用Amazon Aurora的集群功能: Amazon Aurora支持在多个数
如何通过AmazonAurora实现数据库的分布式事务处理
2024-04-09

springboot+mybatisplus+druid如何实现多数据源+分布式事务

这篇文章主要介绍springboot+mybatisplus+druid如何实现多数据源+分布式事务,文中介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们一定要看完!  jdk环境:1.8  springboot:2.1.3.RELEA
2023-06-02

如何对 Golang 中的数据库查询进行分页?

答:是,golang 中可以使用 limit 和 offset 关键字对数据库查询进行分页。步骤如下:确定每页要显示的记录数(pagesize)。计算偏移量(offset),从 0 开始。使用 fmt.sprintf 动态构建查询字符串,插
如何对 Golang 中的数据库查询进行分页?
2024-05-14

编程热搜

目录