RabbitMq TTL+死信队列 延迟消息问题记录

2023-02-28 06:05:23 | 来源:腾讯云

延迟队列存储的对象是对应的延迟消息,所谓的延迟消息是指当消息被发送以后,并不想让消费者立刻拿到消息,而是等待特定时间后,消费者才能拿到这个消息进行消费

利用RabbitMqTTL和死信队列 来实现延时消费。

如果设置的是队列统一过期时间放到死信队列,没有什么问题。


(资料图片)

如果是延时时间设置到每条消息上的。而不是给队列的。

实现方式为消息存活时间为动态用户页面可配置的。

这就导致了一个问题:

先用一条消息的存活时间是1天。后面又进了一条消息存活时间是1小时。

结果一小时到了,发现这条消息并没有被转发到消费延时过期消息的队列。

原因是尽管ttl是设给每条消息的。但是本质上,所有延时消息都还在一个队列里,对它过期时间的检测也是从头部开始的。

它不会检测每一条消息是否过期。而是顺序检测。

如果first in的消息过期时间很长,会导致它阻塞后进的消息。

不仅无法实现真正的过期时间。还会导致,一个大的过期时间的先进的消息,会堆积一堆后进的过期时间短的消息。

问题解决

这个时候可以使用rabbitMq的一个插件:rabbitmq_delayed_message_exchange

一段时间以来,人们一直在寻找用RabbitMQ实现延迟消息的传递方法,到目前为止,公认的解决方案是混合使用TTL和DLX。而rabbitmq_delayed_message_exchange插件就是基于此来实现的,RabbitMQ延迟消息插件新增了一种新的交换器类型,消息通过这种交换器路由就可以实现延迟发送

插件安装

需要根据自己的rabbitMq选择对应的版本。我rabbitMq的版本是RabbitMQ 3.11.0,对应的插件版本就是:3.11.1

基于Linux

--1、cd到rabbitmq默认安装位置cd /usr/lib/rabbitmq/lib/rabbitmq_server-3.7.18/plugins--2、通过ftp工具将插件上传到此目录下--3、开启插件rabbitmq-plugins enable rabbitmq_delayed_message_exchange--4、重启MQ服务systemctl restart rabbitmq-server

基于Docker

--1、通过ftp工具将插件上传到Linux服务器的根目录下--2、拷贝到docker中rabbitmq插件目录下,rabbitmq_delayed_message_exchange-3.9.0.ez(下载包的全名)docker cp /rabbitmq_delayed_message_exchange-3.9.0.ez 容器ID:/plugins--3、进入容器docker exec -it 容器id /bin/bash--4、查看插件是否存在(确保2中的操作已经将插件拷贝过来了)cd pluginsls |grep delay--5、开启插件rabbitmq-plugins enable rabbitmq_delayed_message_exchange--6、退出容器exit--7、重启MQ服务docker restart 容器ID

安装成功

web界面新建交换机选择类型出现红框标注即表示成功

image.png

代码实现

1:springBoot配置

@Configurationpublic class DelayRabbitmqConfig {     /**     * 声明延迟队列     * @return     */    @Bean    public Queue delayQueue(){        return new Queue(QueueConstant.DelayQueue,                true,false,false);    }     /**     * 声明延迟自定义交换机类型     * @return     */    @Bean    public CustomExchange delayCustomExchange(){        HashMap args = new HashMap<>();//        设置 x-delayed-type 为 direct,当然也可以是 topic 等 发送消息时设置消息头 headers 的 x-delay 属性,即延迟时间,如果不设置消息将会立即投递        args.put("x-delayed-type","direct");        return new CustomExchange(ExchangeConstant.DelayCustomerExchange,                "x-delayed-message",true,false,args);    }     /**     * 绑定延迟交换机和队列     * @return     */    @Bean    public Binding delayQueueAndCustomExchange(){        return BindingBuilder.bind(delayQueue())                .to(delayCustomExchange()).with(RoutingKeyConstant.DelayCustomerRoutingKey).noargs();    }}

springMvc配置

引入依赖:    xmlns:util="http://www.springframework.org/schema/util"    http://www.springframework.org/schema/util    http://www.springframework.org/schema/util/spring-util-4.0.xsd                                                                                                                

代码实现

//消息发送final MessagePostProcessor messagePostProcessor = new MyMessagePostProcessor(Integer.valueOf(ttl.toString()));DisTimingPushDto disTimingPushDto = new DisTimingPushDto();disTimingPushDto.setOrderId(dispense.getOrderId());disTimingPushDto.setPushTime(disDispense.getPushTime());rabbitTemplate.convertAndSend(MsgQueueEnum.TIMING_PUSH.getExchangeName(), MsgQueueEnum.TIMING_PUSH.getQueueName(), disTimingPushDto, messagePostProcessor);//每条消息时间配置import org.springframework.amqp.AmqpException;import org.springframework.amqp.core.Message;import org.springframework.amqp.core.MessagePostProcessor;/** * 延迟消息处理器 Processor * @author king * @date 2022年12月28日 11:14 */public class MyMessagePostProcessor implements MessagePostProcessor {    /**     * 消息延迟时间,单位:毫秒     */    private final Integer TTL;    public MyMessagePostProcessor(final Integer ttl) {        this.TTL = ttl;    }    @Override    public Message postProcessMessage(Message message) throws AmqpException {        message.getMessageProperties().setDelay(TTL);        return message;    }}
上一篇 下一篇

相关新闻

RabbitMq TTL+死信队列 延迟消息问题记录

SAMA四p门照片下载

天天亮点!奇数年限定!自2011年起,梅西百球里程碑的年份均为奇数年

外交部发言人回应美方以涉俄因素制裁中企:将予以坚决反制

环球播报:价格锚点是什么意思_锚点是什么意思

洁美科技: 第四届董事会第二次会议决议公告

董明珠:今年两会将再度建议提高个税起征点

昆明市公务员无偿献血月开启|环球聚看点

观天下!上横沥大桥

须和需的区别大全_须和需的区别_世界热门

切诺尔贝利-资讯

我的逆天神器_我的逆天神器第二季|全球播资讯

中国舞蹈文化说——舞蹈基本问题及中国舞蹈文化观研究

02月25日从杭州出发到吉安的防疫政策_天天快资讯

临沂焦庄电动汽车充电站 世界时快讯

最新新闻

RabbitMq TTL+死信队列 延迟消息问题记录

SAMA四p门照片下载

天天亮点!奇数年限定!自2011年起,梅西百球里程碑的年份均为奇数年

外交部发言人回应美方以涉俄因素制裁中企:将予以坚决反制

环球播报:价格锚点是什么意思_锚点是什么意思

洁美科技: 第四届董事会第二次会议决议公告

董明珠:今年两会将再度建议提高个税起征点

昆明市公务员无偿献血月开启|环球聚看点

观天下!上横沥大桥

须和需的区别大全_须和需的区别_世界热门

切诺尔贝利-资讯

我的逆天神器_我的逆天神器第二季|全球播资讯

中国舞蹈文化说——舞蹈基本问题及中国舞蹈文化观研究

02月25日从杭州出发到吉安的防疫政策_天天快资讯

临沂焦庄电动汽车充电站 世界时快讯

快资讯丨湖南维财金

速讯:国家控烟办到大方县调研指导成人烟草流行监测工作

海新能科:山东三聚本次停车检修是年度生产计划工作安排 4月10日前恢复产出合格产品 世界短讯

老默我想吃鱼了被抢注商标,老默吃鱼公司扎堆成立

却的笔顺的读法

环氧地坪漆可以用在胶合板上吗?

中创环保控股子公司祥盛环保回转窑生产线恢复生产|世界速递

九洲集团:东吴证券、方正自营等多家机构于2月20日调研我司

信托业召开年度监管工作会议 今年将完善夯实监管制度框架

天天资讯:核桃树嫁接方法_核桃树

全球快消息!新华全媒+丨春日里的咖啡小店:暖意融融 信心满满

聚焦成都两会丨春播面积13.97万亩,新津“天府粮仓”示范区春播进行时

报告文学杂志_报告文学的特点|最资讯

环球快看:较上财年激增近400%, 印度狂买俄罗斯石油, 背后最大买家是美国!

北青:U17国足失误球员被要求加练 跑8公里返回驻地