• 分布式锁问题以及解决方案(附带讲解视频)


    问题描述

    随着业务发展的需要,原单体单机部署的系统被演化成分布式集群系统后,由于分布式系统多线程、多进程并且分布在不同机器上,这将使原单机部署情况下的并发控制锁策略失效,单纯的Java API并不能提供分布式锁的能力。为了解决这个问题就需要一种跨JVM的互斥机制来控制共享资源的访问,这就是分布式锁要解决的问题!

    分布式锁主流的实现方案:

    1. 基于数据库实现分布式锁

    2. 基于缓存(Redis等)

    3. 基于Zookeeper

    每一种分布式锁解决方案都有各自的优缺点:

    1. 性能:redis最高

    2. 可靠性:zookeeper最高

    这里,我们就基于redis实现分布式锁

     redis实现分布式锁

    redis命令

    SETNX key value

    set key value NX PX 10000

    EX second :设置键的过期时间为 second 秒。

    PX millisecond :设置键的过期时间为 millisecond 毫秒。

    NX :只在键不存在时,才对键进行设置操作。

    SET key value NX 效果等同于 SETNX key value 。

    1. 多个客户端同时获取锁(setnx)

    2. 获取成功,执行业务逻辑{从db获取数据,放入缓存},执行完成释放锁(del)

    3. 其他客户端等待重试

     代码如下:

    1. @GetMapping("testLock")
    2. public void testLock(){
    3. //1获取锁,setne
    4. Boolean lock = redisTemplate.opsForValue().setIfAbsent("lock", "111");
    5. //2获取锁成功、查询num的值
    6. if(lock){
    7. Object value = redisTemplate.opsForValue().get("num");
    8. //2.1判断num为空return
    9. if(StringUtils.isEmpty(value)){
    10. return;
    11. }
    12. //2.2有值就转成成int
    13. int num = Integer.parseInt(value+"");
    14. //2.3把redis的num加1
    15. redisTemplate.opsForValue().set("num", ++num);
    16. //2.4释放锁,del
    17. redisTemplate.delete("lock");
    18. }else{
    19. //3获取锁失败、每隔0.1秒再获取
    20. try {
    21. Thread.sleep(100);
    22. testLock();
    23. } catch (InterruptedException e) {
    24. e.printStackTrace();
    25. }
    26. }
    27. }

    ab压力测试

    使用ab压力测试:

    ab -n 1000 -c 100 http://127.0.0.1:8080/redis/testLock,并查看结果,基本实现。

    问题:setnx刚好获取到锁,业务逻辑出现异常,导致锁无法释放

    解决:设置过期时间,自动释放锁。

    设置锁的过期时间

    设置过期时间有两种方式:

    1. 首先想到通过expire设置过期时间(缺乏原子性:如果在setnx和expire之间出现异常,锁也无法释放)

    2. 在set时指定过期时间(推荐)

     设置过期时间

    自行测试。

    问题:可能会释放其他服务器的锁。

    解决:setnx获取锁时,设置一个指定的唯一值(例如:uuid);释放前获取这个值,判断是否自己的锁

     UUID防止误删

    1. String uuid = UUID.randomUUID().toString();
    2. //....
    3. String lockUuid = (String)redisTemplate.opsForValue().get("lock");
    4. if(lockUuid.equals(uuid)) {
    5. redisTemplate.delete("lock");
    6. }

    问题:删除操作缺乏原子性。

    解决:使用LUA脚本

    LUA脚本保证删除的原子性
    1. @GetMapping("testLockLua")
    2. public void testLockLua() {
    3. //1 声明一个uuid ,将做为一个value 放入我们的key所对应的值中
    4. String uuid = UUID.randomUUID().toString();
    5. //2 定义一个锁:lua 脚本可以使用同一把锁,来实现删除!
    6. String skuId = "25"; // 访问skuId 为25号的商品 100008348542
    7. String locKey = "lock:" + skuId; // 锁住的是每个商品的数据
    8. // 3 获取锁
    9. Boolean lock = redisTemplate.opsForValue().setIfAbsent(locKey, uuid, 3, TimeUnit.SECONDS);
    10. // 第一种: lock 与过期时间中间不写任何的代码。
    11. // redisTemplate.expire("lock",10, TimeUnit.SECONDS);//设置过期时间
    12. // 如果true
    13. if (lock) {
    14. // 执行的业务逻辑开始
    15. // 获取缓存中的num 数据
    16. Object value = redisTemplate.opsForValue().get("num");
    17. // 如果是空直接返回
    18. if (StringUtils.isEmpty(value)) {
    19. return;
    20. }
    21. // 不是空 如果说在这出现了异常! 那么delete 就删除失败! 也就是说锁永远存在!
    22. int num = Integer.parseInt(value + "");
    23. // 使num 每次+1 放入缓存
    24. redisTemplate.opsForValue().set("num", String.valueOf(++num));
    25. /*使用lua脚本来锁*/
    26. // 定义lua 脚本
    27. String script = "if redis.call('get', KEYS[1]) == ARGV[1] then return redis.call('del', KEYS[1]) else return 0 end";
    28. // 使用redis执行lua执行
    29. DefaultRedisScript redisScript = new DefaultRedisScript<>();
    30. redisScript.setScriptText(script);
    31. // 设置一下返回值类型 为Long
    32. // 因为删除判断的时候,返回的0,给其封装为数据类型。如果不封装那么默认返回String 类型,
    33. // 那么返回字符串与0 会有发生错误。
    34. redisScript.setResultType(Long.class);
    35. // 第一个要是script 脚本 ,第二个需要判断的key,第三个就是key所对应的值。
    36. redisTemplate.execute(redisScript, Arrays.asList(locKey), uuid);
    37. } else {
    38. // 其他线程等待
    39. try {
    40. // 睡眠
    41. Thread.sleep(1000);
    42. // 睡醒了之后,调用方法。
    43. testLockLua();
    44. } catch (InterruptedException e) {
    45. e.printStackTrace();
    46. }
    47. }
    48. }

     视频讲解自取:https://pan.baidu.com/s/11fsuXtr6cAzgw9ZdRVeo7g?pwd=t3uh

  • 相关阅读:
    软件测试的发展趋势
    LInux学习------高级IO
    操作系统P,V操作大总结(包含例题)上篇
    Java基础知识—Arrays工具类
    SSM+MySQL+JSP教务管理系统设计与实现(附源码下载地址)
    关系数据理论 规范化
    HSV色彩空间 GRAY色彩空间
    【Java】运算符(算术运算符、赋值运算符、自增自减运算符、关系运算符、逻辑运算符、三元运算符)
    怎么将vue的移动端项目打包成手机的app软件apk格式的。hbuilderx 云打包。
    区块链架构-fabric集群版安装(centos7版本)
  • 原文地址:https://blog.csdn.net/m0_73499047/article/details/133149904