Arnold's Blog Arnold's Blog
🏠首页
  • Java
  • Python
💻前端
🕸️周边技术
🗒️札记
  • Tips
  • 读书
  • 友情链接
🧑‍💻关于
🔖收藏
  • 分类
  • 标签
  • 归档
GitHub (opens new window)

Arnold Shu

知人者智,自知者明。胜人者有力,自胜者强。
🏠首页
  • Java
  • Python
💻前端
🕸️周边技术
🗒️札记
  • Tips
  • 读书
  • 友情链接
🧑‍💻关于
🔖收藏
  • 分类
  • 标签
  • 归档
GitHub (opens new window)
  • Maven

  • Git

  • Docker

  • Distributed

    • 分布式定理之CAP
    • 常用分布式事务协议
      • 两阶段提交协议(2PC)
        • 2PC 简单总结
        • 2PC 的过程
        • 2PC 的实现
      • 三阶段提交协议(3PC)
        • 3PC 简单总结
        • 3PC 的过程
        • 3PC 的问题
    • 分布式“一致性”算法之Paxos
    • 分布式“一致性”算法之Raft
    • 分布式协调服务之ZooKeeper
  • Linux

  • technology
  • Distributed
Arnold Shu
2023-12-28
目录

常用分布式事务协议

# 两阶段提交协议(2PC)

二阶段提交协议(Two-phase Commit,即2PC)是常用的分布式事务解决方案,它可以保证在分布式事务中,要么所有副本(备份数据)同时修改某个数值,要么都不更改(可以理解分布式事务的原子性),以此来保证数据的强一致性。

# 2PC 简单总结

  • 分布式系统中,每个节点仅仅知道自身节点操作状态,对其他节点的操作未可知;
  • 多个节点为了保持一致性引入一个作为协调者的组件来统一掌控所有节点(参与者)的操作结果并最终指示这些节点是否要把操作结果进行真正的提交(比如将更新后的数据写入磁盘等操作);
  • 参与者将操作结果通知协调者,再由协调者根据所有参与者的反馈情报决定各参与者是否要提交操作还是中止操作。

# 2PC 的过程

关于两阶段提交的过程如下图所示(图片摘至(分布式系统的一致性协议之 2PC 和 3PC (opens new window))):

两阶段提交过程

顾名思义,2PC 分为两个过程:

  1. 准备阶段(表决阶段):此时 Coordinator (协调者)向所有的参与者发送一个 vote request,参与者在收到这请求后,如果准备好了就会向 Coordinator 发送一个 VOTE_COMMIT 消息作为回应,告知 Coordinator 自己已经做好了准备,否则会返回一个 VOTE_ABORT 消息;
  2. 提交阶段:Coordinator 收到所有参与者的表决信息,如果所有参与者一致认为可以提交事务,那么 Coordinator 就会发送 GLOBAL_COMMIT 消息,否则发送 GLOBAL_ABORT 消息;对于参与者而言,如果收到 GLOBAL_COMMIT 消息,就会提交本地事务,否则就会取消本地事务。

# 2PC 的实现

通用架构实现,可参考分布式事务中的二阶段提交是什么? (opens new window)

一个**事务管理器(Transaction Manager,简称 TM)协调 1 个或多个资源管理器(Resource Manager,简称 RM)**的活动,所有资源管理器向事务管理器汇报自身活动状态,由事务管理器根据各资源管理器汇报的状态(完成准备或准备失败)来决定各资源管理器是“提交”事务还是进行“回滚”操作。

二阶段提交的具体流程如下:

  1. 应用程序向事务管理器提交请求,发起分布式事务;

  2. 在第一阶段,事务管理器联络所有资源管理器,通知它们准备提交事务;

  3. 各资源管理器返回完成准备(或准备失败)的消息给事务管理器(响应超时算作失败);

  4. 在第二阶段:

    • 如果所有资源管理器均完成准备(如图 1),则事务管理器会通知所有资源管理器执行事务提交;
    • 如果任一资源管理器准备失败(如图 2 中的资源管理器 B),则事务管理器会通知所有资源管理器进行事务回滚。

    图1,所有资源管理器完成准备,事务管理器协调各资源管理器提交事务

图1

图2,任一资源管理器准备失败,事务管理器协调各资源管理器回滚事务

图2

2PC 的问题和解决方案

问题:

  • 单点故障: 两阶段提交的主要问题是它对协调者的单点故障敏感。如果协调者在提交阶段崩溃,系统可能会陷入不一致的状态。
  • 长时间阻塞: 在一些情况下,如果有参与者无法及时响应,可能导致整个系统长时间阻塞。
  • 某些极端情况(提交阶段Coordinator 和参与者都出现挂掉的情况)可能导致数据不一致。

解决方案:

  • 单点故障: 实际生产应用中,Coordinator 都会有相应的备选节点。
  • 长时间阻塞: 在实际的应用中,这可能会导致长阻塞问题,这个问题是通过超时判断机制来解决的,但并不能完全解决同步阻塞问题。

# 三阶段提交协议(3PC)

**三阶段提交协议(Three-Phase Commit,3PC)是对两阶段提交协议(2PC)**的改进,旨在解决2PC的一些问题,如长时间阻塞和单点故障敏感性。3PC引入了额外的阶段以提高协议的鲁棒性。

# 3PC 简单总结

  • 三阶段提交是为了解决两阶段提交协议的缺点而设计的;
  • 与两阶段提交不同的是,三阶段提交是一种“非阻塞”的协议。三阶段提交在两阶段提交的第一阶段与第二阶段之间插入了一个预提交(preCommit),令原先在两阶段提交中,参与者在投票之后,由于协调者发生崩溃或错误,而导致参与者处于无法知晓是否提交或者中止的“不确定状态”所产生的可能相当长的延时的问题三阶段提交得以解决。

# 3PC 的过程

关于三阶段提交的过程如下图所示(图片摘至(分布式系统的一致性协议之 2PC 和 3PC (opens new window))):

三阶段提交过程

顾名思义,3PC 分为三个过程:

  1. 准备阶段(CanCommit):此时 Coordinator (协调者)向所有的参与者发送一个 发送 CanCommit请求,参与者在收到这请求后,如果准备好了就会向 Coordinator 发送一个 Yes 消息作为回应,告知 Coordinator 自己已经做好了准备,否则会返回一个 No 消息;
  2. 预提交阶段(PreCommit):
    • 参与者全部返回Yes,协调者发送PreCommit请求,要求参与者在接收到该请求后进一步确认是否可以提交。参与者执行预提交操作,但仍然不释放锁或资源并且反馈给协调者 ACK 响应,同时等待最终指令;
    • 如果任何参与者在PreCommit阶段表示不可以提交,协调者发送Abort请求,要求所有参与者中止事务。参与者回滚本地事务,释放锁和资源。
  3. 提交阶段(doCommit):
    • 如果所有参与者在PreCommit阶段都确认可以提交,协调者发送Commit请求,要求参与者最终提交事务。参与者释放锁和资源,并将事务标记为已提交并且反馈给协调者 ACK 响应。
    • 在协调者发送Commit请求阶段发生故障,协调者发送Abort请求,要求所有参与者中止事务。参与者回滚本地事务,释放锁和资源并且反馈给协调者 ACK 响应。

# 3PC 的问题

尽管三阶段提交协议(3PC)相对于两阶段提交协议(2PC)在一些方面进行了改进,但它仍然存在一些问题,这些问题包括:

  1. 阻塞问题:
    • 3PC引入了PreCommit阶段来解决2PC的长时间阻塞问题,但在一些情况下,由于网络延迟或者节点故障,仍然可能导致PreCommit阶段的长时间阻塞。
  2. 消息丢失:
    • 如果在CanCommit或PreCommit阶段的消息在网络传输中丢失,协调者可能无法获得所有参与者的响应,导致决策的不确定性。
  3. 不一致性的可能性:
    • 在PreCommit阶段,虽然参与者已经确认可以提交,但在Commit阶段发生故障时,可能导致一部分参与者已经提交,而另一部分未提交,从而导致数据的不一致性。
  4. 单点故障敏感性:
    • 3PC虽然相对于2PC减轻了对协调者的单点故障敏感性,但仍然可能受到协调者故障的影响。如果协调者在PreCommit阶段发生故障,系统可能无法正常进入Commit或Abort阶段。
  5. 性能开销:
    • 3PC引入了额外的PreCommit阶段,增加了协议的复杂性和消息交互次数,可能带来一定的性能开销。
  6. 无法解决网络分区:
    • 3PC并不能完全解决网络分区问题。在网络分区的情况下,可能导致协议无法正常完成,从而影响事务的一致性。
  7. 难以调优:
    • 3PC相对于2PC引入了更多的阶段,使得协议更为复杂,调优和维护难度增加。

总体而言,尽管3PC在一些方面改进了2PC的问题,但在实际应用中,仍然需要仔细考虑协议的适用性,根据具体场景选择合适的分布式事务协议。在一些高性能、高可用性的系统中,基于BASE模型的一致性策略可能更为适用。

参考链接

分布式系统的一致性协议之 2PC 和 3PC (opens new window)

分布式事务中的二阶段提交是什么? (opens new window)

wikipedia 二阶段提交 (opens new window)

​

#2PC#3PC
分布式定理之CAP
分布式“一致性”算法之Paxos

← 分布式定理之CAP 分布式“一致性”算法之Paxos→

最近更新
01
《领域驱动设计:软件核心复杂性应对之道》书摘
12-26
02
Linux 的常用命令
10-22
03
程序设计中SPI和API
10-22
更多文章>
Theme by Vdoing | Copyright © 2017-2024 Arnold Shu | CC BY-SA 4.0 License
  • 跟随系统
  • 浅色模式
  • 深色模式
  • 阅读模式