如何保证RocketMQ顺序消息以及可能出现的问题

已于 2023-04-03 09:48:55 修改
阅读量1.5k 收藏
点赞数
CC 4.0 BY-SA版权
分类专栏： 大中IT企业面试题整理 RocketMQ的今生前世 文章标签： java-rocketmq rocketmq java
于 2023-04-03 09:43:45 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/uniquewonderq/article/details/129899647
本文探讨了RocketMQ中保证顺序消息的方法，包括MessageQueueSelector接口的使用，以及在扩容和消息失败时的处理策略。介绍了如何通过选择器和锁机制确保局部有序，并在消息失败时进行重试或进入死信队列。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

文章目录


一个用户在电商网站上下订单到交易完成，中间会经历一系列动作，订单的状态也会随之变化，一个订单会产生多条MQ消息，下单、付款、发货、买家确认收货，消费端需要严格按照业务状态机的顺序处理，否则，就会出现业务问题。

我们发现，消息带上了状态，不再是一个个独立的个体，有了上下文依赖关系！

对于这个问题，突然想到HTTP协议，其本身也是无状态的，也就是说前后两次请求没有关联，但有些业务功能有登录要求，那怎么解决？

引入Cookie机制，每次请求客户端额外传输一些数据，来达到上下文关联。

回到MQ的消息顺序问题，我们要如何解决？

答案：各退一步，保证局部有序。

比如上面的电商例子，只要保证一个订单的多条状态消息在同一个分区，便可以满足业务需求，这个方案可以覆盖大部分的业务场景

这里面只需要有一个路由策略组件，由它决定消息该放到哪个分区中！

以 RocketMQ 为例

生产端提供了一个接口 MessageQueueSelector

public interface MessageQueueSelector
了解本专栏 订阅专栏 解锁全文 超级会员免费看
RocketMq 顺序消息要怎么实现？
qq_36929638的博客
03-18 713
RocketMQ 的顺序消息通过。
rocketmq顺序发送消息
xixingzhe2的博客
03-08 2974
1、概念 严格顺序消息模式下，消费者收到的所有消息均是有顺序的。 消息有序指的是可以按照消息的发送顺序来消费(FIFO)。RocketMQ可以严格的保证消息有序，可以分为分区有序或者全局有序。 顺序消费的原理解析，在默认的情况下消息发送会采取Round Robin轮询方式把消息发送到不同的queue(分区队列)；而消费消息的时候从多个queue上拉取消息，这种情况发送和消费是不能保证顺序。但是如果控制发送的顺序消息只依次发送到同一个queue中，消费的时候只从这个queue上依次拉取，则就保证了顺
RocketMQ解析-严格顺序消息​
重点在于记录
11-19 522
选择RocketMQ除了它很快以外，其实我们主要看中的是：事务消息、严格顺序性消息 学习思路 什么是严格顺序性消息 代码怎么实现 一、什么是严格顺序性消息 举个栗子： 现在一个订单发了3个消息： 消息1订单创建；消息2订单支付；消息3订单发货；实际中这三个消息是有一定业务顺序的，消费时必须保证一定的顺序才有效 RocketMQ支持两种顺序消息实现 全局顺序消息：一个Topic里所有...
RocketMQ如何保证消息不丢失+消息顺序+处理积压消息+消息轨迹
weixin_44778073的博客
01-24 6142
使用RocketMQ如何保证消息不丢失？ 1、哪些环节会有丢消息的可能？ 其中，1，2，4三个场景都是跨网络的，而跨网络就肯定会有丢消息的可能。 然后关于3这个环节，通常MQ存盘时都会先写入操作系统的缓存page cache中，然后再由操作系统异步的将消息写入硬盘。这个中间有个时间差，就可能会造成消息丢失。如果服务挂了，缓存中还没有来 得及写入硬盘的消息就会丢失。 2、RocketMQ消息零丢失方案 1》 生产者使用事务消息机制保证消息零丢失 1、为什么要发送个half消息？有什...
RocketMQ如何保证消息被有序消费
liwenyang1992的专栏
10-24 617
并发消费模式生产者会将消息轮询发送到不同的队列当中，这些队列会和消费者实例建立多个连接（线程），将消息并发送入到不同的消费者，因为消费者处理速度有快慢，所以并不能保证物流数据会按1~9的顺序依次消费。有序消息是指生产者在产生数据的时候，根据Hash规则指定让消息放入哪个队列，在消费者消费时会保证不同消费者针对每一个队列只有唯一的连接（线程）用于消费指定队列。当同一类消息被送入不同队列，且这些消息在处理上并不需要按时序消费时，可以考虑使用并发消费模式。有序消费模式可以保证消息按队列。
RocketMQ——顺序消息
earthhour的专栏
10-23 1万+
消息有序指的是可以按照消息的发送顺序来消费。 RocketMQ可以严格的保证消息有序。但这个顺序，不是全局顺序，只是分区（queue）顺序。要全局顺序只能一个分区。 之所以出现你这个场景看起来不是顺序的，是因为发送消息的时候，消息发送默认是会采用轮询的方式发送到不通的queue（分区）。如图： 而消费端消费的时候，是会分配到多个queue的，多个queue是同时拉
RocketMQ 如何保证消息的顺序性
最新发布
weixin_43281498的博客
08-20 2000
顺序消费需要由两个阶段消息发送和消息消费协同配合，底层支撑依靠的是 RocketMQ 的存储模型；顺序消费服务启动后，通过三把锁的机制，使得消费者实例单线程的消费重平衡分配的消费队列；假如发生扩容，消费者重启，或者 Broker 宕机 ，顺序消费也会有一定几率较短时间内乱序，所以消费者的业务逻辑还是要保障幂等。
RocketMQ 顺序消息
FireFox1997
07-31 764
RocketMQ 的顺序消息机制为分布式系统中的消息顺序性提供了一种高效的解决方案。通过消息队列的分区和消息路由机制，RocketMQ 能够在保持高性能的同时，确保消息的有序性。
RocketMQ 之顺序消息
FireFox1997
08-02 1289
顺序消息指的是按照消息发送的顺序，确保消息在消费者端也能按照相同的顺序进行消费。这种特性在需要严格顺序处理的场景中非常重要，例如订单处理、金融交易等。RocketMQ 的顺序消息通过队列分区和消息队列选择器的机制，确保了消息的顺序性。在实际应用中，通过合理设计队列和消息选择策略，可以有效保证消息的有序处理。在未来的开发中，充分利用顺序消息可以大大提升系统的可靠性和一致性。
RocketMQ实现顺序消费
for_work_xy的博客
04-07 356
而消费消息的时候从多个queue上拉取消息，这种情况发送和消费是不能保证顺序。但是如果控制发送的顺序消息只依次发送到同一个queue中，消费的时候只从这个queue上依次拉取，则就保证了顺序。当发送和消费参与的queue只有一个，则是全局有序；如果多个queue参与，则为分区有序，即相对每个queue，消息都是有序的。订单号相同的消息会被先后发送到同一个队列中，消费时，同一个OrderId获取到的肯定是同一个队列。消息进同一队列，一个队列对应一个消费者，按照创建→付款→推送→完成的步骤进行消费。
RocketMQ顺序消息
程序员劝退师的博客
08-30 793
介绍 消息有序指的是可以按照消息的发送顺序来消费(FIFO), RocketMQ可以严格的保证消息有序,可以分为分区有序或者全局有序。顺序消费的原理解析,在默认的情况下消息发送会采取Round Robin轮询方式把消息发送到不同的queue(分区队列);而消费消息的时,候从多个queue上拉取消息,这种情况发送和消费是不能保证顺序。但是如果控制发送的顺序消息只依次发送到同一个queue中,消费的时候只从这个queue上依次拉取,则就保证了顺序。当发送和消费参与的queue只有一个,则是全局有序;如果多个qu
RocketMQ的顺序消费问题MessageListenerOrderly()
qq_40662424的博客
02-17 8131
consumer.registerMessageListener(new MessageListenerOrderly() { @Override public ConsumeOrderlyStatus consumeMessage(List<MessageExt> msgs, ConsumeOrderlyContext context) { for (MessageExt msg : msgs) {
RocketMq实现顺序消息
wanghl_的博客
01-03 862
由于前面讲过，一个主题中可能设置多个队列，消息可能被发往不同队列，以至于消费消息时，发现消息并不是按照顺序被消费的。但是很多时候，我们希望消息可以保持顺序消费，以下是学习过程中探索的方法。日后还会一直丰富。
RocketMQ (四) 顺序消息
dmjxsy的博客
02-15 1592
RocketMQ(顺序消息)
RocketMQ的顺序消息（顺序消费）
热门推荐
终生学习践行者
10-29 4万+
简单介绍了消息有序性的概念，以及RocketMQ如何实现消息的顺序消费。
使用RocketMQ如何保证消息顺序
旷野历程
10-10 4727
使用RocketMQ如何保证消息顺序
03.消息中间件RocketMq之顺序消费
u012768625的博客
08-28 332
消息中间件RocketMq之顺序消费 当前情况说明 同一个topic 有4个队列 队列先天支持FIFO模型，单一生产和消费者下只要保证使用MessageListenerOrderly监听器即可 要求 保证有序参与因素 FIFO 队列内保证有序 一个线程发送消息 一个消费线程 顺序消费表示消息消费的顺序同生产者为每个消息队列发送的顺序一致，所以如果正在处理全局顺序是强制性的场景，需要确保使用的主题只有一个消息队列。 并行消费不再保证消息顺序，消费的最大并行数量受每个消费者客户端指定的线
RocketMQ结合实际场景顺序消费，它是如何保证顺序消费的？
BASK2311的博客
02-15 1241
为了保证消息的顺序性，我们必须保证同一个消息队列在同一时刻只能被消费者组内一个消费者消费，从负载均衡方面，向Broker发起锁定该消息队列的请求，上锁成功则新建一个拉取任务PullRequest，从消息消费方面，批量拉取消息成功后，进行提交消费请求，消息提交到内部的线程池，为了保证消息的顺序性，我们必须为消费队列上锁，来保证同一时刻消费队列只会被线程池中的一个线程消费。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Think_Higher

你的鼓励是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值