码农知识堂 - 1000bd
  •   Python
  •   PHP
  •   JS/TS
  •   JAVA
  •   C/C++
  •   C#
  •   GO
  •   Kotlin
  •   Swift
  • RabbitMQ 入门系列:7、保障消息不重复消费:产生消息的唯一ID。


    系列目录

    RabbitMQ 入门系列:1、MQ的应用场景的选择与RabbitMQ安装。

    RabbitMQ 入门系列:2、基础含义:链接、通道、队列、交换机。

    RabbitMQ 入门系列:3、基础含义:持久化、排它性、自动删除、强制性、路由键。

    RabbitMQ 入门系列:4、基础编码:官方SDK使用:链接创建、单例改造、发送消息、接收消息。

    RabbitMQ 入门系列:5、基础编码:交换机的进阶介绍及编码方式。

    RabbitMQ 入门系列:6、保障消息:不丢失:发送方、Rabbit存储端、接收方。

    RabbitMQ 入门系列:7、保障消息:不重复消费:产生消息的唯一ID。

    RabbitMQ 入门系列:8、扩展内容:接收信息时:可否根据RoutingKey过滤监听信息,答案是不能。

    RabbitMQ 入门系列:9、扩展内容:死信队列:真不适合当延时队列。

    RabbitMQ 入门系列:10、扩展内容:延时队列:延时队列插件及其有限的适用场景。

    前言:

    上一篇介绍了消息如何确保不丢失,本篇简单介绍如何保障消息不重复消费的处理方式。

    对于接收端而言,对消息的确认来往是需要时间的。

    如果同一个队列,同时存在多个客户端监听,那么多个客户端有一定概率能收到相同的信息。

    这时候就会产生消息重复的问题的:

    1、处理消息重复消费的几种方式:

    网上人们说的主要两种方式:

    方式一、Redis:用setnx命令,做消息id判断。
    
    方式三、数据库:做唯一索引,消息id能插入就可以处理,所以重复消费就会失败。

    优缺点说明:

    方式一:Redis setnx 分布式锁:

    不推荐使用:一种不太靠谱的方式,如果项目对数据允许出错,可以尝试使用。

    为啥不靠谱,可以参考文章:https://zhuanlan.zhihu.com/p/418268774

    方式二:数据库 的锁:

    推荐使用:可以用唯一索引,也可以用事务锁,使用起来成熟又简单。

    方式三:独占文件、剪贴版

    推荐场景:单机场景下

    1、可以通过对文件的独占打开和释放,来达到进程间的锁。
    
    2、可以通过对剪贴版的读写,来达到进程间的锁。

    前面几种方式,都有一个要素,就是需要消息的唯一ID。

    2、如何产生消息的唯一ID:

    A:对消息进行hash,取hash值做为唯一ID(无法避免,有一定概念产生相同的hash)。
    
    B:对每一个发送的消息,都产生一个GUID,这样在获取消息的时候,就可以拿到消息对应的唯一ID。

    下面看代码演示:

    3、发送消息时,带唯一ID:

    复制代码
    using (var channel = Rabbit.Instance.DefaultConnection.CreateModel())
    {
        channel.BasicReturn += (sender, e) =>
        {
            //通过交换机发送过去,但没发送到指定的队列,数据丢失
            //do .....
            Console.WriteLine("消息没发到指定队列:" + Encoding.UTF8.GetString(e.Body.ToArray()));
        };
        channel.ConfirmSelect();
        channel.QueueDeclare("FirstQueue", false, false, false);
        var pro = channel.CreateBasicProperties();
        pro.MessageId = Guid.NewGuid().ToString();
        channel.BasicPublish("", "FirstQueue", true, pro, Encoding.UTF8.GetBytes("这是要发送的内容"));
        if (channel.WaitForConfirms(TimeSpan.FromSeconds(10)))
        {
            //发送确认成功
        }
        else
        {
            //超时或失败,需要处理是否重发消息。
        }
    }
    复制代码

    在消息发送前,生成一个属性,这个属性可以附带很多信息,其中一个是MessageId。

    然后发送的时候,第4个参数,把属性带过去即可。

    4、接收消息:获取消息唯一ID:

    复制代码
    var channel = Rabbit.Instance.DefaultConnection.CreateModel();
     
    var consumer = new EventingBasicConsumer(channel);
    consumer.Received += (model, ea) =>
    {
        var message = Encoding.UTF8.GetString(ea.Body.ToArray());
       
        Console.WriteLine("收到默认消息 {0}", message);
        Console.WriteLine("收到默认消息GUID {0}", ea.BasicProperties.MessageId);
        try
        {
            channel.BasicAck(ea.DeliveryTag, false);
        }
        catch (Exception err)
        {
    
           //处理确认失败的情况。
        }
       
       
    };
    channel.BasicConsume(queue: "FirstQueue",
                          autoAck: false,
                          consumer: consumer);
    复制代码

     

    总结:

    本篇介绍如何保障消息不重复消费以及如何产生消息的唯一ID,除了网上的基本两种方式,个人还奉献了单机版的场景方式。

  • 相关阅读:
    51单片机实训项目之产品数量计数器
    黑苹果安装心得
    SparkSql读取外部Hql文件的公共类开发
    前端开发:JS中闭包的使用详解
    线上问题处理案例:出乎意料的数据库连接池
    微服务开发,这10个点你要知道
    Java Double valueOf(String s)方法具有什么功能呢?
    7000字详解Spring Boot项目集成RabbitMQ实战以及坑点分析
    jsoup框架技术文档--java爬虫--架构体系
    选择器基础
  • 原文地址:https://www.cnblogs.com/cyq1162/p/16603245.html
  • 最新文章
  • 攻防演习之三天拿下官网站群
    数据安全治理学习——前期安全规划和安全管理体系建设
    企业安全 | 企业内一次钓鱼演练准备过程
    内网渗透测试 | Kerberos协议及其部分攻击手法
    0day的产生 | 不懂代码的"代码审计"
    安装scrcpy-client模块av模块异常,环境问题解决方案
    leetcode hot100【LeetCode 279. 完全平方数】java实现
    OpenWrt下安装Mosquitto
    AnatoMask论文汇总
    【AI日记】24.11.01 LangChain、openai api和github copilot
  • 热门文章
  • 十款代码表白小特效 一个比一个浪漫 赶紧收藏起来吧!!!
    奉劝各位学弟学妹们,该打造你的技术影响力了!
    五年了,我在 CSDN 的两个一百万。
    Java俄罗斯方块,老程序员花了一个周末,连接中学年代!
    面试官都震惊,你这网络基础可以啊!
    你真的会用百度吗?我不信 — 那些不为人知的搜索引擎语法
    心情不好的时候,用 Python 画棵樱花树送给自己吧
    通宵一晚做出来的一款类似CS的第一人称射击游戏Demo!原来做游戏也不是很难,连憨憨学妹都学会了!
    13 万字 C 语言从入门到精通保姆级教程2021 年版
    10行代码集2000张美女图,Python爬虫120例,再上征途
Copyright © 2022 侵权请联系2656653265@qq.com    京ICP备2022015340号-1
正则表达式工具 cron表达式工具 密码生成工具

京公网安备 11010502049817号