SpringCloud(12)— 分布式事务(Seata)
Posted 我不配拥有55kg的你
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了SpringCloud(12)— 分布式事务(Seata)相关的知识,希望对你有一定的参考价值。
SpringCloud(12)— 分布式事务(Seata)
一 事务基础
1.事务的ACID原则
2.分布式事务问题
在分布式系统下,一个业务跨越多个服务或数据源,每一个服务都是一个事务。
要保证所有分支事务的最终状态一致,这样的事务就是分布式事务
3.讨论内容
二 理论基础
1.CAP定理
1998年由加州大学的计算机科学家 Eric Brewer 提出,分布式系统有三个指标:
- Consistency(一致性)
- Availability(可用性)
- Partition tolerance(分区容错性)
Eric Brewer指出,分布式系统无法同时满足以上三个指标。这个结论叫做CAP定理。
1.Consistency(一致性)
用户访问分布式系统中的任意节点,得到的数据必须一致。
2.Availability(可用性)
用户访问集群中的任意健康节点,必须能够得到响应,而不是拒绝或超时。
3.Partition tolerance(分区容错性)
分区
:因为网络故障或其他原因导致分布式系统中的部分节点与其他节点失去连接,形成独立分区。
容错
:在集群出现分区时,整个系统也要对外提供服务。
4.小结
分布式系统通过网络连接,一定会出现分区问题(P)
当分区出现时,系统的一致性(C)和可用性(A)就无法同时满足
以Elasticsearch
集群为例,当集群出现分区时,故障节点会被剔除集群,数据分片会重新分配到其他节点,保证数据的一致。因此Elasticsearch
是低可用,高一致性
,属于CP
。
2.BASE理论
BASE理论
是对CAP
的一种解决思路,主要包含三个思想:
- Basically Available(基本可用):分布式系统出现故障时,允许损失部分可用性,即保证核心可用
- Soft State(软状态):在一定时间内,允许出现中间状态,比如临时性的不一致状态
- Eventually Consistent(最终一致性):虽然无法保证强一致性,但是软状态结束后,最终达到数据的一致性
分布式最大的问题是各个子事务的一致性问题,因此可以借鉴CAP定理
和BASE理论
去解决这些问题
- AP模式:各个子事务分别执行和提交,允许出现结果不一致,然后采取弥补措施恢复数据即可,最终实现
一致性
- CP模式:各个子事务执行后相互等待,同时提交,同时回滚,达成
强一致性
,但事务等待过程中,处于弱可用状态
3.分布式事务模型
解决分布式事务,各个子系统之间必须能感知到彼此的事务状态,才能保证一致性。因此需要一个事务协调者来协调每一个事务的参与者(子系统事务)。
这里的子系统事务,称之为分支事务
,有关联的各个分支事务在一起称之为全局事务
。
三 Seata的使用
Seata是蚂蚁金服和阿里巴巴共同开源的分布式事务解决方案,致力于提高性能和简单易用的分布式事务服务。为用户打造一站式的分布式事务解决方案。
Seata官网:Seata
1.Seata架构
Seata事务管理中有三个重要角色:
- TC(Transaction Coordinator):事务协调者,维护全局和分支事务的状态,协调全局事务提交或回滚
- TM(Transaction Manager):事务管理者,定义全局事务的范围,开始全局事务,提交或回滚全局事务
- RM(Resource Manager):资源管理器,管理分支事务处理的资源,与TC交谈以注册分支事务和报告分支事务的状态,并驱动分支事务提交或回滚
Seata提供了四种不同的分布式事务解决方案:
- XA模式:强一致性分阶段事务模式,牺牲了一定的可用性,无业务入侵
- TCC模式:最终一致的分阶段事务模式,有业务入侵
- AT模式:最终一致的分阶段事务模式,无业务入侵,也是
Seata
的默认模式
- SAGA模式:长事务模式,有业务入侵
2.部署Seata的TC
Seata
的架构中有三个角色,分别为TC
,TM
和RM
,其中的TM
和RM
其实是对业务的管理和代理
而TC
是脱离业务之外的独立服务
,需要去协调TM(全局事务)
和RM(分支事务)
Seata的TC服务下载地址:https://github.com/seata/seata/releases
笔者编辑此文档时使用的版本为seata-server-1.4.2
1.编辑registry.conf
下载解压完成之后,找到 /conf/registry.conf
,将seata-server
服务注册到注册中心,笔者这里使用的是nacos
,具体的配置信息科参考官网。
以下是一个简单的配置示例:
#配置注册中心,此处使用 nacos 作为注册中心
registry
type = "nacos"
nacos
application = "seata-server"
serverAddr = "127.0.0.1:8848"
group = "SEATA_GROUP"
namespace = ""
cluster = "default"
username = "nacos"
password = "nacos"
#统一配置,此处使用 nacos 作为统一配置
config
type = "nacos"
nacos
serverAddr = "127.0.0.1:8848"
namespace = ""
group = "SEATA_GROUP"
username = "nacos"
password = "nacos"
dataId = "seataServer.properties"
2.添加seataServer.properties
在 nacos
配置中心添加 seataServer.properties
文件
配置内容如下:
主要配置了存储方式为db
,且使用mysql数据库
和mysql数据库
的基本信息
# 数据存储方式,db代表数据库
store.mode=db
store.db.datasource=druid
store.db.dbType=mysql
store.db.driverClassName=com.mysql.cj.jdbc.Driver
store.db.url=jdbc:mysql://127.0.0.1:3306/seata?serverTimezone=Asia/Shanghai&characterEncoding=utf8
store.db.user=root
store.db.password=123456
store.db.minConn=5
store.db.maxConn=30
store.db.globalTable=global_table
store.db.branchTable=branch_table
store.db.queryLimit=100
store.db.lockTable=lock_table
store.db.maxWait=5000
# 事务、日志等配置
server.recovery.committingRetryPeriod=1000
server.recovery.asynCommittingRetryPeriod=1000
server.recovery.rollbackingRetryPeriod=1000
server.recovery.timeoutRetryPeriod=1000
server.maxCommitRetryTimeout=-1
server.maxRollbackRetryTimeout=-1
server.rollbackRetryTimeoutUnlockEnable=false
server.undo.logSaveDays=7
server.undo.logDeletePeriod=86400000
# 客户端与服务端传输方式
transport.serialization=seata
transport.compressor=none
# 关闭metrics功能,提高性能
metrics.enabled=false
metrics.registryType=compact
metrics.exporterList=prometheus
metrics.exporterPrometheusPort=9898
3.创建数据库
mysql数据库seata
的内容如下:
主要用来记录全局事务
和分支事务
SET NAMES utf8mb4;
SET FOREIGN_KEY_CHECKS = 0;
-- ----------------------------
-- 分支事务表
-- ----------------------------
DROP TABLE IF EXISTS `branch_table`;
CREATE TABLE `branch_table` (
`branch_id` bigint(20) NOT NULL,
`xid` varchar(128) CHARACTER SET utf8 COLLATE utf8_general_ci NOT NULL,
`transaction_id` bigint(20) NULL DEFAULT NULL,
`resource_group_id` varchar(32) CHARACTER SET utf8 COLLATE utf8_general_ci NULL DEFAULT NULL,
`resource_id` varchar(256) CHARACTER SET utf8 COLLATE utf8_general_ci NULL DEFAULT NULL,
`branch_type` varchar(8) CHARACTER SET utf8 COLLATE utf8_general_ci NULL DEFAULT NULL,
`status` tinyint(4) NULL DEFAULT NULL,
`client_id` varchar(64) CHARACTER SET utf8 COLLATE utf8_general_ci NULL DEFAULT NULL,
`application_data` varchar(2000) CHARACTER SET utf8 COLLATE utf8_general_ci NULL DEFAULT NULL,
`gmt_create` datetime(6) NULL DEFAULT NULL,
`gmt_modified` datetime(6) NULL DEFAULT NULL,
PRIMARY KEY (`branch_id`) USING BTREE,
INDEX `idx_xid`(`xid`) USING BTREE
) ENGINE = InnoDB CHARACTER SET = utf8 COLLATE = utf8_general_ci ROW_FORMAT = Compact;
-- ----------------------------
-- 全局事务表
-- ----------------------------
DROP TABLE IF EXISTS `global_table`;
CREATE TABLE `global_table` (
`xid` varchar(128) CHARACTER SET utf8 COLLATE utf8_general_ci NOT NULL,
`transaction_id` bigint(20) NULL DEFAULT NULL,
`status` tinyint(4) NOT NULL,
`application_id` varchar(32) CHARACTER SET utf8 COLLATE utf8_general_ci NULL DEFAULT NULL,
`transaction_service_group` varchar(32) CHARACTER SET utf8 COLLATE utf8_general_ci NULL DEFAULT NULL,
`transaction_name` varchar(128) CHARACTER SET utf8 COLLATE utf8_general_ci NULL DEFAULT NULL,
`timeout` int(11) NULL DEFAULT NULL,
`begin_time` bigint(20) NULL DEFAULT NULL,
`application_data` varchar(2000) CHARACTER SET utf8 COLLATE utf8_general_ci NULL DEFAULT NULL,
`gmt_create` datetime NULL DEFAULT NULL,
`gmt_modified` datetime NULL DEFAULT NULL,
PRIMARY KEY (`xid`) USING BTREE,
INDEX `idx_gmt_modified_status`(`gmt_modified`, `status`) USING BTREE,
INDEX `idx_transaction_id`(`transaction_id`) USING BTREE
) ENGINE = InnoDB CHARACTER SET = utf8 COLLATE = utf8_general_ci ROW_FORMAT = Compact;
SET FOREIGN_KEY_CHECKS = 1;
4.运行服务
运行/bin/seata-server.bat
文件来启动seata-server
,linux系统使用/bin/seata-server.sh
启动完成后即可在nacos
看到名为seata-server
的服务
2.1 部署新版Seata的TC服务
笔者这里使用编辑时的最新版seata-server1.6.1
新版提供了UI界面
以及新的配置文件格式
。
新版的seata
配置文件使用了 yaml
格式,配置文件为/conf/application.yml
,并且提供了示例文件/conf/application.example.yml
1.配置application.yml
以下是配置文件的简单示例:
server:
# 设置seata服务的访问端口
port: 7091
spring:
application:
# 设置seata服务的微服务名称
name: seata-server
console:
# 设置seata服务的登录用户名及密码
user:
username: seata
password: 123456
seata:
# 配置微服务信息,可参考提供的示例文件
config:
type: nacos
nacos:
server-addr: 127.0.0.1:8848
namespace:
group: SEATA_GROUP
username: nacos
password: nacos
context-path:
data-id: seataServer.properties
# 配置注册中心相关信息,可参考提供的示例文件
registry:
type: nacos
preferred-networks: 30.240.*
nacos:
application: seata-server
server-addr: 127.0.0.1:8848
group: SEATA_GROUP
namespace:
cluster: default
username:
password:
context-path:
store:
# 配置数据存储信息,这里使用了 db 存储,更多可参考提供的示例文件
mode: db
db:
datasource: druid
db-type: mysql
driver-class-name: com.mysql.cj.jdbc.Driver
url: jdbc:mysql://127.0.0.1:3306/seata?rewriteBatchedStatements=true
user: root
password: 123456
min-conn: 10
max-conn: 100
global-table: global_table
branch-table: branch_table
lock-table: lock_table
distributed-lock-table: distributed_lock
query-limit: 1000
max-wait: 5000
security:
secretKey: SeataSecretKey0c382ef121d778043159209298fd40bf3850a017
tokenValidityInMilliseconds: 1800000
ignore:
urls: /,/**/*.css,/**/*.js,/**/*.html,/**/*.map,/**/*.svg,/**/*.png,/**/*.ico,/console-fe/public/**,/api/v1/auth/login
2.创建数据库
新版本的seata
提供了对应的数据库文件,位于 /script/server/db
下
我们这里使用了 mysql数据库
,所以使用/script/server/db/mysql.sql
这个文件。
根据实际使用情况,使用对应的数据库文件即可。
3.运行服务
运行服务和旧版本一样,运行/bin/seata-server.bat
文件来启动seata-server
,linux系统使用/bin/seata-server.sh
运行成功以后,使用浏览器打开 localhost:7091
来访问seata
后台,这里的端口号根据自己的实际情况来即可
http://localhost:7091
然后就可以看到seata
的后台,数据配置文件中的账号密码访问即可。
3.微服务集成
1.引入坐标
在微服务中引入seata
的maven
坐标
<!--引入Seata-->
<dependency>
<groupId>com.alibaba.cloud</groupId>
<artifactId>spring-cloud-starter-alibaba-seata</artifactId>
<exclusions>
<!--移除spring-cloud-starter-alibaba-seata中的低版本seata-->
<exclusion>
<groupId>io.seata</groupId>
<artifactId>seata-spring-boot-starter</artifactId>
</exclusion>
</exclusions>
</dependency>
<dependency>
<groupId>io.seata</groupId>
<artifactId>seata-spring-boot-starter</artifactId>
<!--这里的版本与seata的TC服务版本保持一致-->
<version>1.4.2</version>
</dependency>
2.修改项目配置文件
修改配置文件application.yml
,让微服务通过注册中心去找到seata-server
seata:
registry:
nacos:
server-addr: localhost:8848
namespace: ""
group: SEATA_GROUP
#TC服务在nacos中的服务名称
application: seata-server
username: nacos
password: nacos
type: nacos
# 事务组,根据事务组获取TC服务的集群名称
tx-service-group: seata-demo
service:
vgroup-mapping:
#映射default(默认集群名称)到事务组
seata-demo: default
重启微服务,将微服务注册到seata
,留意seata
的日志,给出提示说明配置已经生效
3.小结
seata
根据事务组的名称,去查找指定的集群
通过 tx-service-group
定义事务组名称
通过vgroup-mapping
映射指定的事务组到指定的集群
seata
客户端事务组和集群的映射实现原理:以tx-service-group
的值作为key,去vgroup-mapping
中查找映射关系
四 XA模式
1.XA模式原理
XA模式是强一致性分阶段事务模式,牺牲了一定的可用性,无业务入侵
XA规范
是 X/Open 组织定义的分布式事务处理(DTP)标准,XA规范
描述了全局的TM与局部的RM之间的接口,几乎主流的的数据库都对XA规范
提供了支持
XA模式的执行过程:
1.多个RM共同执行,执行完成之后(prepare)告知事务协调者
已经执行完成(ready),等到事务协调者发起通知时多个RM再一起提交(commit)
2.多个RM共同执行,执行完成之后(prepare)告知事务协调者
已经执行完成(ready),但是如果事务协调者
收到某个RM的失败消息,则会通知所有参与事务的RM全部回滚
注意:单个RM的回滚是利用数据库本事的事务回滚功能实现
2.Seata的XA模式
seata
中的XA模式
基于XA模式原理
做了一些调整
RM一阶段的工作:
- 注册分支事务(RM)到
TC
- 执行分支业务但是不提交
- 报告执行状态到
TC
TC二阶段的工作:
- 检查各分支事务的执行状态
- 如果都成功,则通知所有RM提交事务
- 如果都失败,则通知所有RM回滚事务
RM二阶段的工作:接受TC的指令,提交或回滚事务
3.XA模式优缺点
优势:
- 强一致性:各个RM之间相互等待,一同提交或回滚,具有强一致性,保证了数据的同步和完整,满足ACID原则
- 容易实现:绝大部分主流数据库已经实现了单个事务的功能,基于这些数据库去实现XA模式变得比较容易
缺点:
- 可用性低:RM较多或某个RM耗时较长时,其他已执行完成的RM必须等待(占据数据库锁),造成了资源的浪费
- 依赖性强:过度依赖于数据库的事务功能,如果某个数据库不提供事务功能(例如Redis),则无法使用XA模式
4.SpringBoot实现XA
在微服务项目的配置文件中指定seata
的模式为XA
每个参与事务的微服务项目都需要配置seata模式
seata:
data-source-proxy-mode: XA
在发起全局事务的入口方法上添加 @GlobalTransactional
注解
实现示例:当扣款失败时,生成的订单将不会被提交
@Autowired
private IUserCardClientFeign userCardClientFeign;
@GetMapping("/create")
@GlobalTransactional
public Boolean create(@RequestParam("userid") Integer userId)
Order order = new Order();
// build object
DeductMoneyVo deductMoneyVo = new DeductMoneyVo();
// build object
//1.生成订单
boolean save = orderService.save(order);
//2.扣款
boolean deduct = userCardClientFeign.deductMoney(deductMoneyVo);
//3.扣减库存
return save;
五 AT模式
1.AT模式原理
AT模式
同样是分阶段的事务模型,AT模式
弥补了XA模式
中资源锁定周期过长的缺陷
阶段一RM的工作:
- 注册分支事务
- 记录
undo-log(数据快照)
- 执行业务sql并且提交
- 报告业务状态
阶段二RM的工作:
- 成功时删除
undo-log(数据快照)
即可 - 失败时先使用
undo-log(数据快照)
恢复数据,再删除undo-log(数据快照)
AT模式
与XA模式
的最大区别:
XA模式
一阶段不提交事务,锁定资源;AT模式
一阶段直接提交,不锁定资源XA模式
依赖数据库机制实现回滚,AT模式
利用数据快照
实现数据回滚XA模式
为强一致;AT模式
则为最终一致
2.脏写问题和全局锁
AT模式
由于直接提交数据,提前释放了数据库资源,这导致了在并发访问的情况下会存在一些安全问题。
例如:并发情况下,A事务的A1子事务执行完成释放了数据库资源,B事务的B1子事务此时就可以获取A1子事务释放的资源并且修改。此时如果A事务的A2子事务执行失败,那么A事务会回滚。这就会导致B事务的B1子事务操作丢失。
为解决AT模式
的脏写问题,AT模式
引入了全局锁
的概念。
全局锁:由TC服务记录当前正在操作的某行数据的事务,该事务持有
全局锁
,具备执行权
由TC服务提供全局锁,防止在操作期间其他事务再次修改数据。
加入全局锁之后的AT模式
与XA模式
类似,但实际上存在着一定差别:
- 全局锁由TC提供
- 粒度小:资源锁定期间,其他事务仍然可以读写该资源未被锁定的部分,例如以上示例,全局锁只是锁定了该行数据的
money字段
,锁定期间该行数据的其他字段仍然可以被读写
极端情况下,如果是一个未被TC所管理的事务
来读写有全局锁
的数据,仍然有可能出现脏写问题。
AT模式
在保存快照时保存了两份快照
,分别是更新前
和更新后
,在AT模式第二阶段
发生回滚时会进行比对,如果比如失败,则可以知道在AT模式第一阶段
和AT模式第二阶段
之间数据发生了更新,此时则需要人工介入。
3.AT模式优缺点
优点:
AT模式第一阶段
完成直接提交,释放数据库资源,性能较好- 利用
全局锁
实现读写隔离 - 没有代码入侵,整个过程由TC自动完成
缺点:
AT模式第一阶段
和AT模式第二阶段
之间属于软状态
,属于最终一致- TC的快照功能会影响性能,但仍然优于
XA模式
4.SpringBoot实现AT
导入Mysql
数据表
undo_log
表导入到与微服务
关联的数据库,用于记录快照信息
lock_table
表导入到与TC服务
关联的数据,用于记录全局锁
SET NAMES utf8mb4;
SET FOREIGN_KEY_CHECKS = 0;
-- ----------------------------
-- Table structure for undo_log
-- ----------------------------
DROP TABLE IF EXISTS `undo_log`;
CREATE TABLE `undo_log` (
`branch_id` bigint(20) NOT NULL COMMENT 'branch transaction id',
`xid` varchar(100) CHARACTER SET utf8 COLLATE utf8_general_ci NOT NULL COMMENT 'global transaction id',
`context` varchar(128) CHARACTER SET utf8 COLLATE utf8_general_ci NOT NULL COMMENT 'undo_log context,such as serialization',
`rollback_info` longblob NOT NULL COMMENT 'rollback info',
`log_status` int(11) NOT NULL COMMENT '0:normal status,1:defense status',
`log_created` datetime(6) NOT NULL COMMENT 'create datetime',
`log_modified` datetime(6) NOT NULL COMMENT 'modify datetime',
UNIQUE INDEX `ux_undo_log`(`xid`, `branch_id`) USING BTREE
) ENGINE = InnoDB CHARACTER SET = utf8 COLLATE = utf8_general_ci COMMENT = 'AT transaction mode undo table' ROW_FORMAT = Compact;
-- ----------------------------
-- Records of undo_log
-- ----------------------------
-- ----------------------------
-- Table structure for lock_table
-- ----------------------------
DROP TABLE IF EXISTS `lock_table`;
CREATE TABLE `lock_table` (
`row_key` varchar(128) CHARACTER SET utf8 COLLATE utf8_general_ci NOT NULL,
`xid` varchar(96) CHARACTER SET utf8 COLLATE utf8_general_ci NULL DEFAULT NULL,
`transaction_id` bigint(20) NULL DEFAULT NULL,
`branch_id` bigint(20) <以上是关于SpringCloud(12)— 分布式事务(Seata)的主要内容,如果未能解决你的问题,请参考以下文章
springCloud分布式事务实战改造ThemeMicroService 支持分布式事务
springCloud分布式事务实战改造合服务BlockMicroService支持分布式事务