• 分布式事务控制方案


    分布式事务技术方案

    1. 什么是分布式事务

    一次课程发布操作需要向数据库、redis、elasticsearch、MinIO写四份数据,这里存在分布式事务问题。

    1)本地事务

    平常我们在程序中通过spring去控制事务是利用数据库本身的事务特性来实现的,因此叫数据库事务,由于应用主要靠关系数据库来控制事务,此数据库只属于该应用,所以基于本应用自己的关系型数据库的事务又被称为本地事务。

    本地事务具有ACID四大特性,数据库事务在实现时会将一次事务涉及的所有操作全部纳入到一个不可分割的执行单元,该执行单元中的所有操作 要么都成功,要么都失败,只要其中任一操作执行失败,都将导致整个事务的回滚。

    2)分布式事务

    现在的需求是课程发布操作后将数据写入数据库、redis、elasticsearch、MinIO四个地方,这四个地方已经不限制在一个数据库内,是由四个分散的服务去提供,与这四个服务去通信需要网络通信,而网络存在不可到达性,这种分布式系统环境下,通过与不同的服务进行网络通信去完成事务称之为分布式事务。

    拿转账举例:
    我们知道本地事务依赖数据库本身提供的事务特性来实现,因此以下逻辑可以控制本地事务:

    begin transaction; 
    //1.本地数据库操作:张三减少金额 
    //2.本地数据库操作:李四增加金额 
    commit transation; 
    
    • 1
    • 2
    • 3
    • 4

    但是在分布式环境下,会变成下边这样:

    begin transaction; 
    //1.本地数据库操作:张三减少金额 
    //2.远程调用:让李四增加金额 
    commit transation;
    
    • 1
    • 2
    • 3
    • 4

    可以设想,当远程调用让李四增加金额成功了,由于网络问题远程调用并没有返回,此时本地事务提交失败就回滚了张三减少金额的操作,此时张三和李四的数据就不一致了。

    因此在分布式架构的基础上,传统数据库事务就无法使用了,张三和李四的账户不在一个数据库中甚至不在一个应 用系统里,实现转账事务需要通过远程调用,由于网络问题就会导致分布式事务问题。

    下边的场景都会产生分布式事务:
    微服务架构下:
    在这里插入图片描述

    单服务多数据库:
    在这里插入图片描述
    多服务单数据库:
    在这里插入图片描述

    2. CAP理论

    CAP是 Consistency、Availability、Partition tolerance三个词语的缩写,分别表示一致性、可用性、分区容忍性

    使用下边的分布式系统结构 进行说明:
    在这里插入图片描述

    客户端经过网关访问用户服务的两个结点,一致性是指用户不管访问哪一个结点拿到的数据都是最新的,比如查询小明的信息,不能出现在数据没有改变的情况下两次查询结果不一样。

    可用性是指任何时候查询用户信息都可以查询到结果,但不保证查询到最新的数据。

    分区容忍性也叫分区容错性,当系统采用分布式架构时由于网络通信异常导致请求中断、消息丢失,但系统依然对外提供服务

    CAP理论要强调的是在分布式系统中这三点不可能全部满足,由于是分布式系统就要满足分区容忍性,因为服务之间难免出现网络异常,不能因为局部网络异常导致整个系统不可用。

    满足P那么C和A不能同时满足

    比如我们添加一个用户小明的信息,该信息先添加到结点1中,再同步到结点2中,如下图:
    在这里插入图片描述

    如果要满足C一致性,必须等待小明的信息同步完成系统才可用(否则会出现请求到结点2时查询不到数据,违反了一致性),在信息同步过程中系统是不可用的,所以满足C的同时无法满足A。

    如果要满足A可用性,要时刻保证系统可用就不用等待信息同步完成,此时系统的一致性无法满足。

    所以在分布式系统中进行分布式事务控制,要么保证CP、要么保证AP

    2)分布式事务控制方案

    要根据应用场景进行判断。

    • CP的场景:满足C舍弃A,强调一致性。
      跨行转账:一次转账请求要等待双方银行系统都完成整个事务才算完成,只要其中一个失败另一方执行回滚操作。
      开户操作:在业务系统开户同时要在运营商开户,任何一方开户失败该用户都不可使用,所以要满足CP。

    • AP的场景:满足A舍弃C,强调可用性。
      订单退款,今日退款成功,明日账户到账,只要用户可以接受在一定时间内到账即可。
      注册送积分,注册成功积分在24分到账。
      支付短信通信,支付成功发短信,短信发送可以有延迟,甚至没有发送成功。

    在实际应用中符合AP的场景较多,其实虽然AP舍弃C一致性,实际上最终数据还是达到了一致,也就满足了最终一致性,所以业界定义了BASE理论。

    BASE 是 Basically Available(基本可用)、Soft state(软状态)和 Eventually consistent (最终一致性)三个短语的缩写。

    • 基本可用:当系统无法满足全部可用时保证核心服务可用即可,比如一个外卖系统,每到中午12点左右系统并发量很高,此时要保证下单流程涉及的服务可用,其它服务暂时不可用。

    • 软状态:是指可以存在中间状态,比如:打印自己的社保统计情况,该操作不会立即出现结果,而是提示你打印中,请在XXX时间后查收。虽然出现了中间状态,但最终状态是正确的。

    • 最终一致性:退款操作后没有及时到账,经过一定的时间后账户到账,舍弃强一致性,满足最终一致性。

    分布式事务控制有哪些常用的技术方案?

    • 实现CP就是要实现强一致性:

    ​ 使用Seata框架基于AT模式实现

    ​ 使用Seata框架基于TCC模式实现。

    • 实现AP则要保证最终数据一致性:

    ​ 使用消息队列通知的方式去实现,通知失败自动重试,达到最大失败次数需要人工处理;

    ​ 使用任务调度的方案,启动任务调度将课程信息由数据库同步到elasticsearch、MinIO、redis中。

    选择:
    满足CP?
    如果要满足CP就表示课程发布操作后向数据库、redis、elasticsearch、MinIO写四份数据,只要有一份写失败其它的全部回滚。

    满足AP?
    课程发布操作后,先更新数据库中的课程发布状态,更新后向redis、elasticsearch、MinIO写课程信息,只要在一定时间内最终向redis、elasticsearch、MinIO写数据成功即可。

  • 相关阅读:
    函数式编程
    trie树(前缀树)
    基本数据结构与算法实现JavaAPI【2】-----排序篇
    NVIDIA 安装 CUDA
    吴恩达机器学习课程笔记1-2
    微信小程序开发---自定义底部tabBar
    Java基础—接口Lock
    HAproxy+Nginx7层负载均衡
    set/ multiset 容器
    丢弃Excel,Pandas一行搞定
  • 原文地址:https://blog.csdn.net/qq_47949604/article/details/132922243