第4章 使用Saga管理事务

  • 前言
  • 1. 微服务架构下的事务管理
    • 1.1 分布式事务的挑战
    • 1.2 一个Saga的示例
    • 1.3 Saga使用补偿事务来回滚所作出的改变
  • 2. Saga的协调模式
    • 2.1 两种Saga协调模式
    • 2.2 实现协同式的Create Order Saga
    • 2.3 协同式Sage服务间通信相关的问题
    • 2.4 协同式Sage的优缺点
    • 2.5 实现编排式的Create Order Saga
    • 2.6 把Saga编排器视为一个状态机
    • 2.7 编排式Saga的优缺点
  • 3. 解决隔离问题
    • 3.1 Saga只满足ACD
    • 3.2 缺乏隔离导致的问题
    • 3.3 Saga的结构模型术语
    • 3.4 解决隔离问题的对策
  • 4. Order Service和Create Order Saga的设计
    • 4.1 Order Service的设计及其Saga
    • 4.2 OrderService类
    • 4.3 Create Order Saga的实现
    • 4.4 CreateOrderSaga编排器
    • 4.5 CreateOrderSagaState类
    • 4.6 KitchenServiceProxy类
    • 4.7 Eventuate Tram Saga框架
    • 4.8 OrderCommandHandlers类
    • 4.9 OrderServiceConfiguration类
  • 5. 本章小结
  • 最后

前言

传统的分布式事务管理方法对于现代应用程序来说不是一个好的选择,跨服务的操作必须使用所谓的Saga(一种消息驱动的本地事务序列)来维护数据一致性,而不是ACID事务(原子性、一致性、隔离性和持久性)。

Saga的一个挑战在于只满足ACD(原子性、一致性和持久性)特性,而缺乏ACID事务的隔离性。因此应用程序必须使用所谓的对策(countermeasure),找到办法来防止或减少由于缺少隔离而导致的并发异常

这是一本关于微服务架构设计方面的书,这是本人阅读的学习笔记。以下对一些符号做些说明:

()为补充,一般是书本里的内容;
[]符号为笔者笔注;


1. 微服务架构下的事务管理

微服务架构下的事务往往需要横跨多个服务,每个服务都有属于自己的私有数据库。在这种情况下,应用程序必须使用一些更为高级的事务管理机制来管理事务。

1.1 分布式事务的挑战

在多个服务、数据库和消息代理之间为此数据一致性的传统方法是采用分布式事务。

分布式事务管理的事实标准是XA标准:

  • XA采用两阶段提交来保证事务中所有参与方同时完成提交,或者失败时同时回滚;
  • 应用程序中的整个技术栈需要满足XA标准(包括数据库、消息代理、数据库驱动、消息API等);

其存在的挑战有:

  • 许多新技术,包括NoSQL数据库(如MongoDB和Cassandra),不支持XA标准的分布式事务;
  • 一些流行的消息代理(如RabbitMQ和Apache Kafka)不支持分布式事务;
  • 分布式事务本质都是同步进程间通信,会降低分布式系统的可用性;

1.2 一个Saga的示例

Sage模式:通过使用异步消息来协调一系列本地事务,从而维护多个服务之间的数据一致性。


当本地事务完成时,服务会发布消息。然后,此消息将触发Saga中的下一个步骤。

1.3 Saga使用补偿事务来回滚所作出的改变

Saga无法自动回滚事务,因为每个步骤都会将其更改提交到本地数据库。


需要注意不是所有步骤都需要事务补偿,如只读步骤、当某步骤之后的操作总会成功时等。

2. Saga的协调模式

Saga的实现包含协调Saga步骤的逻辑。

2.1 两种Saga协调模式

  • 协同式(choreography):把Saga的决策和执行顺序逻辑分布在Sage的每一个参与方中,它们通过交换事件的方式来进行沟通;
  • 编排式(orchestration):【推荐】把Saga的决策和执行顺序逻辑集中在一个Saga编排器类中。Saga编排器发出命令式消息给各个Saga参与方,指定这些参与方服务完成具体操作(本地事务);

2.2 实现协同式的Create Order Saga

参与方通过交换事件进行沟通,每个参与方从Order Service开始,更新其数据库并发布触发下一个参与方事件。

  • 当第5步失败时,创建的事件名称为:Credit card authorization failed


图解

  1. Order Service创建一个处于APPROVAL_PENDING状态的Order并发布OrderCreated事件;
  2. Consumer Service消费OrderCreated事件,验证消费者是否可以下订单,并发布ConsumerVerified事件;
  3. Kitchen Service消费OrderCreated事件,验证Order,创建一个处于CREATE_PENDING状态的后厨工单Ticket,并发布TicketCreated事件;
  4. Accounting Service消费OrderCreated事件并创建一个处于PENDING状态的CreditCardAuthorization;
  5. Accounting Service消费TicketCreatedConsumerVerified事件,向消费者的信用卡收费,并发布CreditCardAuthorized事件;
    • 如果失败,则发布CreditCardAuthorizationFailed事件;
  6. Kitchen Service消费CreditCardAuthorized事件,将Ticket的状态更改为AWAITING_ACCEPTANCE;
    • 如果失败,则消费CreditCardAuthorizationFailed事件,将Ticket的状态更改为REJECTED;
  7. Order Service接收CreditCardAuthorized事件,将Order的状态改为APPROVED,并发布OrderApproved事件;
    • 如果失败,则消费CreditCardAuthorizationFailed事件,将Order的状态更改为REJECTED;

2.3 协同式Sage服务间通信相关的问题

在实现基于协同的Saga时,需要考虑一些与服务间通信相关的问题:

  • 确保Saga参与方将更新其本地数据库和发布事件作为数据库事务的一部分;

    • 例如:在Create Order Saga中,Kitchen Service接受CreditCarAuthorized事件,创建Ticket,发布到TicketCreated事件;数据库的更新和事件发布必须是原子的;
    • 解决:Saga参与方必须使用事务性消息;
  • 确保Saga参与方必须能够将接受到的每个事件映射到自己的数据上;
    • 例如:当Order Service收到CreditCardAuthorized事件时,它必须能够查找相应的Order;
    • 解决:让Saga参与方发布包含相关性ID的事件;

2.4 协同式Sage的优缺点

好处

  • 简单:服务在创建、更新和删除业务对象时发布事件;
  • 松耦合:参与方订阅事件并且彼此之间不会因此而产生耦合;

弊端

  • 更难理解:协调式Saga的逻辑分布在每个服务的实现中;开发人员有时很难理解特定Saga是如何工作;
  • 服务之间的循环依赖关系:Saga参与方订阅彼此事件,通常会导致循环依赖关系;
  • 紧耦合的风险:每个Saga参与方都需要订阅所有影响它们的事件;

2.5 实现编排式的Create Order Saga

开发人员定义一个编排器类,该类唯一的职责是告诉Saga的参与方该做什么事清。Saga编排器使用命令 / 异步响应方式与Saga参与方服务通信。
基于编排式是Saga的每个步骤都包括一个更新数据库和发布消息的服务。

图解

Order Service首先创建(实例化)一个Order对象和一个Create Order Saga编排器对象,一切正常后流程如下:

  1. Saga编排器向Consumer Service发送Verify Consumer命令;
  2. Consumer Service回复Consumer Verified消息;
  3. Saga编排器向Kitchen Service发送Create Ticket命令;
  4. Kitchen Service回复Ticket Created消息;
  5. Saga编排器向Accounting Service发送Authorize Card消息;
  6. Accounting Service使用Card Authorized消息回复;
  7. Saga编排器向Kitchen Service发送Approve Ticket命令;
  8. Saga编排器向Order Service发送Approve Ordere命令(命令式消息);

2.6 把Saga编排器视为一个状态机

状态机是由一组状态和一组由事件触发的状态之间的转换组成。每个转换都可以有一个动作,对Saga来说动作就是对某个参与方对调用。

将Saga建模成状态机非常有用,因为它描述了所有可能的场景(可能成功也可能失败)。

  • Verifying Consumer:初始状态。当处于此状态时,该Saga正在等待Consumer Service验证消费者是否可以下订单;
  • Creating Ticket:该Saga正在等待对Create Ticket命令的回复;
  • Authorizing Card:等待Authorizing Service授权消费者的信用卡;
  • Order Approved:最终状态,表示该Saga已成功完成;
  • Order Rejected:最终状态,表示Order被其中一个参与方拒绝;

2.7 编排式Saga的优缺点

好处

  • 更简单的依赖:不会引入循环依赖关系;
  • 较少的耦合:每个服务实现供编排器调用的API,因此它不需要知道Saga参与方发布的事件;
  • 改善关注点隔离,简化业务逻辑:Saga的协调逻辑本地化在Saga编排器中;领域对象更简单,并且不需要了解它们参与的Saga;

弊端

  • 在编排器中存在集中过多业务逻辑的风险

    • 解决办法:可以通过设计只负责排序的编排器来避免此问题,并且不包含任何其他业务逻辑;

3. 解决隔离问题

ACID事务的隔离性可确保同时执行多个事务的结果与顺序执行它们的结果相同。而Saga只满足ACD(原子性、一致性、持久性),不满足隔离性。

3.1 Saga只满足ACD

  • 原子性:Saga实现确保执行所有事务或撤销所有更改;
  • 一致性:服务内的参照完整性(referential integrity)由本地数据库处理;服务之间的参照完整性由服务处理;
  • 持久性:由本地数据库处理;

3.2 缺乏隔离导致的问题

缺乏隔离将导致以下三个异常。

  • 丢失更新:一个Saga没有读取更新,而是直接覆盖了另一个Saga所做的更改;
  • 脏读:一个事务或一个Saga读取了尚未完成的Saga所做的更新;
  • 模糊或不可重复读:一个Saga的两个不同步骤读取相同的数据却获得了不同的结果,因为另一个Saga已经进行了更新;

3.3 Saga的结构模型术语

一个Saga包含三个类型的事务。

  • 可补偿性事务:可以使用补偿事务回滚的事务;
  • 关键性事务:Saga执行过程的关键节点。如果关键性事务成功,则Saga将一直运行到完成。关键性事务不见得是一个可补偿性事务,或者可重复性事务。但是它可以是最后一个可补偿的事务或第一个可重复的事务;
  • 可重复性事务:在关键性事务之后的事务,保证成功;

3.4 解决隔离问题的对策

  • 语义锁:应用程序级的锁;

    • Saga的可补偿性事务会在其创建或更新的任何记录中设置标志,该标志表示该记录未提交且可能发生失败;
    • 如:在可补偿性事务执行时给操作对象添加上*_PENDING状态,以告诉该对象的其他Saga,该对象当前正处于一个Saga的处理过程中;
  • 交换式更新:把更新操作设计成可以按任何顺序执行;
    • 将更新操作设计为可交换的;
    • 如:账户的debit()credit()操作是可交换的;
  • 悲观视图:重新排序Saga的步骤,以最大限度地降低业务风险;
    • 重新排序Saga的步骤,以最大限度地降低由于脏读而导致的业务风险;
  • 重读值:通过重写数据来防止脏写,以在覆盖数据之前验证它是否保持不变;
    • 使用此对策的Saga在更新之前重新读取记录,验证它是否未更改,然后根性记录;如果记录已更改,则Saga将中止并可能重新启动。此对策是乐观脱机锁模式的一种形式;
    • 如:可以用来处理Order在批准过程中被取消的情况;
  • 版本文件:将更新记录下来,以便可以对它们重新排序;
    • 记录对数据执行的操作,以便可以对它们进行重新排序;
    • 如:当Accounting Service先收到Cancel Authorization请求,再收到Authorize Card请求时,它会注意到它已经收到Cancel Authorization请求并跳过授权信用卡;
  • 业务风险评级(by value):使用每个请求的业务风险来动态选择并发机制;
    • 使用此对策的应用程序使用每个请求的属性来决定使用Saga和分布式事务;

4. Order Service和Create Order Saga的设计

示例:使用语义锁对策的Create Order Saga的详细设计和实现。

4.1 Order Service的设计及其Saga

  • 服务的业务逻辑由传统的业务逻辑类组成,与传统业务一样,业务核心由OrderServiceOrderOrderRepository类实现;
  • 还有一些Saga编排器类,包括CreateOrderSaga类,它可以编排Create Order Saga;
  • Order Service即是一个Saga编排器,也是一个Saga参与方;Order Service参与它自己的Saga,它有一个OrderCommandHandlers适配器类,该适配器类通过调用Order Service来处理命令消息;

4.2 OrderService类

一个由服务的API层调用的领域服务,负责创建和管理订单。

OrderService的UML类图

OrderService类及其createOrder()方法

4.3 Create Order Saga的实现

使用Eventuate Tram Saga框架编写,它提供了一种特定于领域的语言(DSL),用于定义Saga的状态。

OrderService的Saga UML类图

  • CreateOrderSaga:定义Saga状态机的单例类;它调用CreateOrderSagaState来创建命令式消息,并使用Saga参与方代理类(如KitchenServiceProxy)指定的消息通道将它们发送给参与方;
  • CreateOrderSagaState:一个Saga的持久化状态,用于创建命令式消息;
  • Saga参与方的代理类(如KitchenServiceProxy):每个代理类定义一个Saga参与方的消息API,它由命令通道、命令式消息和回复类型组成。

4.4 CreateOrderSaga编排器

CreateOrderSaga类实现了2.6点的状态机;它使用Eventuate Tram Saga框架提供的DSL来定义Create Order Saga的步骤;核心代码为Saga的定义,如下:

4.5 CreateOrderSagaState类

CreateOrderSagaState类表示Saga实例状态;此类由OrderService创建,并由Eventuate Tram Saga框架持久化保存在数据库中;其职责为创建发送给Saga参与方的消息;

4.6 KitchenServiceProxy类

代理类不是必要的,使用代理类的好处有两个:代理类定义静态类型端点,这减少了Saga向服务发送错误消息的可能性;代理类是一个定义良好的调用服务的API,使服务代码更易于理解和测试;

4.7 Eventuate Tram Saga框架

Eventuate Tram Saga是一个用于编写Saga编排器和Saga参与方的框架;它使用Eventuate Tram的事务性消息能力。

Eventuate Tram Saga框架

OrderService创建Create Order Saga实例时的事件序列

当SagaManager收到来自Saga参与方的回复消息时的事件序列

4.8 OrderCommandHandlers类

Order Service参与其自己的Saga;OrderCommandHandlers类定义了这些Saga发起命令式消息的处理程序方法。

OrderCommandHandlers UML类图

Order Service的命令处理程序

4.9 OrderServiceConfiguration类

Order Service使用Spring框架;OrderServiceConfiguration是一个@Configuration类,使用Spring @Bean实例化并组装在一起。

5. 本章小结

  • 某些系统操作需要更新分散在多个服务中的数据。传统的基于XA / 2PC的分布式事务不适合现代应用。更好的方法是使用Saga模式。Saga是使用消息机制协调的一组本地事务序列。每个本地事务都在单个服务中更新数据。由于每个本地事务都会提交更改,因此如果由于违反业务规则而导致Saga必须回滚,则必须执行补偿事务以显式撤销更改;
  • 可以使用协同或编排协调Saga的步骤。在基于协同的Saga中,本地事务发布触发其他参与方执行本地事务的事件。在基于编排的Saga中,集中式Saga编排器向参与方发送命令式消息,告诉它们执行本地事务。可以通过将Saga编排器建模为状态机来简化开发和测试,简单的Saga可以使用协同式,但编排式通常是复杂Saga的更好选择;
  • 设计基于Saga的业务逻辑可能具有挑战性,因为与ACID事务不同,Saga不是彼此孤立的。你必须经常使用各种对策,即防止ACD事务模型引起的并发异常的设计策略。应用甚至可能需要使用锁来简化逻辑,即使这样会导致死锁。

最后

新人制作,如有错误,欢迎指出,感激不尽! 欢迎关注公众号,会分享一些更日常的东西! 如需转载,请标注出处!

《微服务架构设计模式》读书笔记 | 第4章 使用Saga管理事务相关推荐

  1. 微服务架构设计模式读书笔记

    1.总览 2.单体架构 2.1 单体架构好处 主要体现在早期 应用开发简单 易于对应用程序进行大规模的更改 测试相对简单直观 部署简单明了 横向扩展不费吹灰之力 2.2 局限性 过度的复杂性会吓退开发 ...

  2. 微服务架构设计模式 读书笔记一

    作者:[美] 克里斯·理查森(Chris Richardson) 是Java社区的著名布道师.JavaOne等知名技术大会的常年主讲人,也是<POJOs in Action>(中文名< ...

  3. 轻量级微服务架构【读书笔记2】

    1. Spring Boot 是什么(What) Spring Boot 是为生产级 Spring 应用而生的,它使得开发 Spring 应用程序更加高效.简洁. 1.1 由来 Spring 1.0 ...

  4. 微服务架构设计模式学习笔记——六边形架构

    目录 一 软件架构的4+1模型 二 分层架构风格 三 六边型架构 四 代码示例 五 总结 一 软件架构的4+1模型 先上图,软件架构的4+1模型如图1.1所示: 图1.1 4+1模型 注:上图中的元素 ...

  5. 《微服务架构设计模式》读书笔记 | 第9章 微服务架构中的测试策略(上)

    第9章 微服务架构中的测试策略(上) 前言 1. 微服务架构中的测试策略概述 1.1 编写自动化测试 1.2 使用模拟和桩进行测试 1.3 使用范围对测试进行分类 1.4 使用测试象限对测试进行分类 ...

  6. 规模化微服务——《微服务设计》读书笔记

    改变思维的角度:故障无处不在 当微服务规模化后,故障是无可避免的,以往我们总是想尽力避免故障的发生,而当故障实际发生时,我们往往束手无策.我们花了很多时间在流程设计和应用设计的层面上来阻止故障的发生, ...

  7. 康威定律和系统设计——《微服务设计》读书笔记

    康威定律 任何组织在设计一套系统时,所交付的设计方案在结构上都与该组织的沟通结构保持一致. --梅尔.康威 如何理解这句话在软件工程上的含义?埃里克.S.雷蒙德说:如果你有四个小组开发一个编译器,那你 ...

  8. 安全——《微服务设计》读书笔记

    身份认证和授权       1.单点登录(SSO) 当主体试图访问一个资源,他会被定向到一个身份提供者那里进行身份验证,身份提供者验明正向后会发消息给服务提供者,让服务提供者来决定是否允许它访问资源. ...

  9. 监控——《微服务设计》读书笔记

    在单块应用的世界里,当我们遇到问题时,我们至少清楚从哪里开始调查.网站访问速度?网站访问异常?CPU占用过高?这些都是单块应用程序的问题,单一的故障点会极大地简化对问题的排查. 而现在我们面对了多个微 ...

  10. 测试——《微服务设计》读书笔记

    一.测试象限(Brain Marick) 二.测试金字塔(Mike Cohn)       1.单元测试 通常只测试一个函数或方法调用,通过TDD或者基于属性而写的测试就属于这一类,在UnitTest ...

最新文章

  1. Leecode11. 盛最多水的容器——Leecode大厂热题100道系列
  2. java equals 判断空_Java 判断字符串是否为空的三种方法与性能分析
  3. nodjes 支付宝接口 - 优惠卷
  4. 【洛谷P4315】月下“毛景树”(树链剖分)
  5. Go语言操作MySQL的基础知识
  6. java的io流的file类_java IO流 (一) File类的使用
  7. 《java入门第一季》之面向对象(static关键字内存图解)
  8. 建模案例1:北京二手房房价影响因素
  9. [硬件]_ELVE_STLINK下载出现nternal command error问题
  10. 全国大学生软件测试大赛web应用测试,2017全国大学生软件测试大赛Web应用测试(团体)夏季预选赛入选名单...
  11. 梁武帝萧衍之代齐建梁行贿亡国,南北朝梁国之鉴!
  12. flash player官网地址 建议不要下载flash.cn的
  13. 计算机控制系统生产现场应用,浅析计算机控制系统在工业现场生产中的应用.doc...
  14. uni-app开发一寸二寸证件大头半身照制作合成小程序
  15. 如何让局域网中的其他主机访问虚拟机
  16. 四大行、城商行等银行都在使用什么数据库?
  17. 解决Microsoft已经阻止宏运行,因为此文件的来源不受信任。
  18. [Vue warn]: Unknown custom element: <helptext> - did you register the component correctly? For recu
  19. python学习,共同成长,招集python+odoo共同创业合伙人
  20. Axure初学者——好用的网站和技巧

热门文章

  1. linux固态硬盘解锁,linux – 如何使用hdparm解锁ssd磁盘?
  2. 搭建SkyWalking测试环境
  3. .Net线程常见问题和误解解答集锦
  4. Qt 打包发布(自定义Cmd提取依赖)
  5. SHGetFileInfo()获取系统图标方法
  6. VMware Workstation 虚拟机启动就直接蓝屏重启问题解决
  7. 用excel的宏命令解決標籤批量打印的問題
  8. IDEMIA推出尖端人脸识别技术IDEMIA 3D Face
  9. 一.海思Hi3516ev100视频输入(VI)模块--结合例程理解
  10. 五条号自媒体运营技巧、五条号如何提高推荐量