• Redis实战 - 15 Redis事务机制和乐观锁实现


    1. Redis事务简介

    在 Redis 中,也存在多个客户端同时向 Redis 系统发送命令的并发可能性,因此同一个数据,可能在不同的时刻被不同的线程所操纵,这样就出现了并发下的数据一致的问题。为了保证异性数据的安全性,Redis 为提供了事务方案。

    而 Redis 的事务是使用 MULTI-EXEC 的命令组合,使用它可以提供两个重要的保证:

    ① Redis保证一个事务中的所有命令要么都执行,要么都不执行。如果在发送 EXEC 命令前客户端断线了,则 Redis 会清空事务队列,事务中的所有命令都不会执行。而一旦客户端发送了 EXEC 命令,所有的命令就都会被执行,即使此后客户端断线也没关系,因为Redis中已经记录了所有要执行的命令。

    ② Redis 事务中的命令都会被 Redis 进行序列化并按顺序执行,事务在执行的过程中不会被其他客户端发生的命令所打断,即其他客户端提交的命令请求不会插入到事务执行命令序列中。试想客户端A需要执行几条命令,同时客户端B发送了一条命令,如果不使用事务,则客户端B的命令可能会插入到客户端A的几条命令中执行。如果不希望发生这种情况,也可以使用事务。

    总结说:redis事务就是一次性、顺序性、排他性的执行一个队列中的一系列命令。

    2. Redis事务的操作命令

    在 Redis 的连接中,请注意要求是一个连接,所以更多的时候在使用 Spring 中会使用 SessionCallback 接口进行处理,在 Redis 中使用事务会经过 3 个过程:

    • 开启事务
    • 命令进入队列
    • 执行事务
    命 令说 明备 注
    multi开启事务命令,之后的命令就进入队列,而不会马上被执行在事务生存期间,所有的 Redis 关于数据结构的命令都会入队
    watch key1 [key2…]监听某些键,当被监听的键在事务执行前被修改,则事务会被回滚使用乐观锁
    unwatch key1 [key2…]取消监听某些键——
    exec执行事务,如果被监听的键没有被修改,则采用执行命令,否则就回滚命令在执行事务队列存储的命令前,Redis 会检测被监听的键值对有没有发生变化,如果没有则执行命令, 否则就回滚事务
    discard回滚事务回滚进入队列的事务命令,之后就不能再用 exec 命令提交了

    在 Redis 中开启事务是 multi 命令,而执行事务是 exec 命令。multi 到 exec 命令之间的 Redis 命令将采取进入队列的形式,直至 exec 命令的出现,才会一次性发送队列里的命令去执行,而在执行这些命令的时候其他客户端就不能再插入任何命令了,这就是 Redis 的事务机制。

    ① multi和exec命令执行事务的过程:

    在这里插入图片描述

    先使用 multi 启动了 Redis 的事务,因此进入了 set 和 get 命令,我们可以发现它并未马上执行,而是返回了一个“QUEUED”的结果。这说明 Redis 将其放入队列中,并不会马上执行,当命令执行到 exec 的时候它就会把队列中的命令发送给 Redis 服务器,这样存储在队列中的命令就会被执行了,所以才会有“OK” “OK”和“value1”,“value2”的输出返回。

    ② discard命令回滚事务:

    在这里插入图片描述

    如果回滚事务,则可以使用 discard 命令,它就会进入在事务队列中的命令,这样事务中的方法就不会被执行了。当我们使用了 discard 命令后,再使用 exec 命令时就会报错,因为 discard 命令已经取消了事务中的命令,而到了 exec 命令时,队列里面已经没有命令可以执行了,所以就出现了报错的情况。

    在 Spring 中要使用同一个连接操作 Redis 命令的场景,这个时候我们借助的是 Spring 提供的 SessionCallback 接口,采用 Spring 去实现本节的命令,代码如下所示:

    SessionCallback callBack = (SessionCallback) (RedisOperations ops)-> {
        // 开启事务
        ops.multi();
        ops.boundValueOps("key1").set("value1");
        // 注意由于命令只是进入队列,而没有被执行,所以此处采用get命令,而value却返回为null
        String value = (String) ops.boundValueOps("key1").get();
        System.out.println ("事务执行过程中,命令入队列,而没有被执行,所以value为空: value="+value);
        // 此时list会保存之前进入队列的所有命令的结果
        // 执行事务
        List list = ops.exec(); 
        // 事务结束后,获取value1
        value = (String) redisTemplate.opsForValue().get("key1");
        return value;
    };
    //执行Redis的命令
    String value = (String)redisTemplate.execute(callBack);
    System.out.println(value);
    
    • 1
    • 2
    • 3
    • 4
    • 5
    • 6
    • 7
    • 8
    • 9
    • 10
    • 11
    • 12
    • 13
    • 14
    • 15
    • 16
    • 17

    从代码看,使用了 SessionCallBack 接口,从而保证所有的命令都是通过同一个 Redis 的连接进行操作的。

    在使用 multi 命令后,要特别注意的是,使用 get 等返回值的方法一律返回为空,因为在 Redis 中它只是把命令缓存到队列中,而没有去执行。这是在 Java 对 Redis 事务编程中开发者极其容易犯错的地方,一定要十分注意才行。使用 exec 后就会执行事务,执行完了事务后,执行 get 命令就能正常返回结果了。最后使用 redisTemplate.execute(callBack); 就能执行我们在 SessionCallBack 接口定义的 Lambda 表达式的业务逻辑,并将获得其返回值。

    List list = ops.exec(); 
    
    • 1

    上述命令将返回之前在事务队列中所有命令的执行结果,并保存在一个 List 中,我们只要在 SessionCallback 接口的 execute 方法中将 list 返回,就可以在程序中获得各个命令执行的结果了。

    3. Redis的事务回滚

    对于 Redis 而言,不单单需要注意其事务处理的过程,其回滚的能力也和数据库不太一样,这也是需要特别注意的一个问题

    ① Redis 事务遇到的命令格式正确而数据类型不符:

    在这里插入图片描述

    我们将 key1 设置为字符串,而使用命令 incr 对其自增,但是命令只会进入事务队列,而没有被执行,所以它不会有任何的错误发生,而是等待 exec 命令的执行。

    当 exec 命令执行后,之前进入队列的命令就依次执行,当遇到 incr 时发生命令操作的数据类型错误,所以显示出了错误,而其之前和之后的命令都会被正常执行。

    注意,这里命令格式是正确的,问题在于数据类型,对于命令格式是错误的却是另外一种情形。

    ② Redis事务遇到命令格式错误的 :

    在这里插入图片描述

    可以看到我们使用的 incr 命令格式是错误的,这个时候 Redis 会立即检测出来并产生错误,而在此之前我们设置了 key1,在此之后我们设置了 key2。当事务执行的时候,我们发现 key1和key2 的值为空,说明被 Redis 事务回滚了。

    可以看出在执行事务命令的时候,在命令入队的时候,Redis 就会检测事务的命令是否正确,如果不正确则会产生错误。无论之前和之后的命令都会被事务所回滚,就变为什么都没有执行。

    当命令格式正确,而因为操作数据结构引起的错误,则该命令执行出现错误,而其之前和之后的命令都会被正常执行。这点和数据库很不一样,这是需要读者注意的地方。

    对于一些重要的操作,我们必须通过程序去检测数据的正确性,以保证 Redis 事务的正确执行,避免出现数据不一致的情况。Redis 之所以保持这样简易的事务,完全是为了保证移动互联网的核心问题即性能。

    4. Redis监控事务

    在 Redis 中使用 watch 命令可以决定事务是执行还是回滚。一般而言,可以在 multi 命令之前使用 watch 命令监控某些键值对,然后使用 multi 命令开启事务,执行各类对数据结构进行操作的命令,这个时候这些命令就会进入队列。

    当 Redis 使用 exec 命令执行事务的时候,它首先会去比对被 watch 命令所监控的键值对,如果没有发生变化,那么它会执行事务队列中的命令,提交事务;如果发生变化,那么它不会执行任何事务中的命令,而去事务回滚。无论事务是否回滚,Redis 都会去取消执行事务前的 watch 命令,这个过程如图所示:

    在这里插入图片描述

    Redis 参考了多线程中使用的 CAS(比较与交换,Compare And Swap)去执行的。在数据高并发环境的操作中,我们把这样的一个机制称为乐观锁。

    当一条线程去执行某些业务逻辑,但是这些业务逻辑操作的数据可能被其他线程共享了,这样会引发多线程中数据不一致的情况。

    为了克服这个问题,首先,在线程开始时读取这些多线程共享的数据,并将其保存到当前线程的副本中,我们称为旧值(old value),watch 命令就是这样的一个功能。

    然后,开启线程业务逻辑,由 multi 命令提供这一功能。在执行更新前,比较当前线程副本保存的旧值和当前线程共享的值是否一致,如果不一致,那么该数据已经被其他线程操作过,此次更新失败。

    为了保持一致,线程就不去更新任何值,而将事务回滚;否则就认为它没有被其他线程操作过,执行对应的业务逻辑,exec 命令就是执行“类似”这样的一个功能。

    注意,“类似”这个字眼,因为不完全是,原因是 CAS 原理会产生 ABA 问题。所谓 ABA 问题来自于 CAS 原理的一个设计缺陷,它可能引发 ABA 问题,如表 1 所示:

    在这里插入图片描述

    在处理复杂运算的时候,被线程 2 修改的 X 的值有可能导致线程 1 的运算出错,而最后线程 2 将 X 的值修改为原来的旧值 A,那么到了线程 1 运算结束的时间顺序 T6,它将检测 X 的值是否发生变化,就会拿旧值 A 和当前的 X 的值 A 比对,结果是一致的,于是提交事务。

    然后在复杂计算的过程中 X 被线程 2 修改过了,这会导致线程 1 的运算出错。在这个过程中,对于线程 2 而言,X 的值的变化为 A->B->A,所以 CAS 原理的这个设计缺陷被形象地称为“ABA 问题”。

    仅仅记录一个旧值去比较是不足够的,还要通过其他方法避免 ABA 问题。常见的方法如 Hibernate 对缓存的持久对象(PO)加入字段 version 值,当每次操作一次该 PO,则 version=version+1,这样采用 CAS 原理探测 version 字段,就能在多线程的环境中,排除 ABA 问题,从而保证数据的一致性。

    从上面的分析可以看出,Redis 在执行事务的过程中,并不会阻塞其他连接的并发,而只是通过比较 watch 监控的键值对去保证数据的一致性,所以 Redis 多个事务完全可以在非阻塞的多线程环境中并发执行,而且 Redis 的机制是不会产生 ABA 问题的,这样就有利于在保证数据一致的基础上,提高高并发系统的数据读/写性能。

    ① 事务成功提交的过程:

    在这里插入图片描述

    这里我们使用了 watch 命令设置了一个 key1 的监控,然后开启事务设置 key2,直至 exec 命令去执行事务,这里我们看到了一个事务的过程,而 key2 也在事务中被成功设置。

    ② 事务回滚的过程:

    在这里插入图片描述

    时刻客户端1客户端2说明
    T1set key1 value1客户端1:返回 OK
    T2watch key1客户端1:监控 key1
    T3multi客户端1:开启事务
    T4set key2 value2客户端1:事务命令入列
    T5set key1 vall客户端2:修改 key1 的值
    T6exec客户端1:执行事务

    在客户端1执行事务时,事务会先检査在 T2 时刻被监控的 key1 是否被其他命令修改过。 因为客户端 2 修改过,所以它会回滚事务,事实上如果客户端执行的是 set key1 value1 命令,它也会认为 key1 被修改过,然后返回(nil),所以是不会产生 ABA 问题的。

  • 相关阅读:
    c语言 --- 分支结构
    「BUAA OO Unit 2 HW8」第二单元总结
    第十一天 自习
    轻松上手 | 使用国内资源安装 K3s 全攻略
    MYSQL安装及卸载
    awtk用C语言开发串口通信示例
    农夫山泉2面面试经历
    深度解读《深度探索C++对象模型》之数据成员的存取效率分析(一)
    高清无线传输同屏器如何实现,无线,1屏和4屏,2屏和3屏显示一样的画面,从3屏和4屏和可以对PC端控制。
    java-python+vue社区防疫服务管理系统网站
  • 原文地址:https://blog.csdn.net/qq_42764468/article/details/127582419