什么是消息队列?

消息队列的产生主要是为了解决系统间的异步解耦与确保最终一致性。在实际应用场景中,往往存在一些主流程操作和辅助流程操作,其中主流程需要快速响应用户请求,而辅助流程可能涉及复杂的处理逻辑或者依赖于外部服务。通过将这些辅助流程的消息放入消息队列,使得它们可以并行执行,并且不会阻塞主流程的运行,从而提高了系统的整体性能和用户体验。同时,消息队列支持至少一次的消息投递机制,保证了即使在网络不稳定或者其他异常情况下,辅助流程也一定能够得到执行的机会,进而增强了系统的可靠性和稳定性。

什么场景要使用消息队列

在实际应用场景中,RocketMQ作为一种高效可靠的消息队列服务,能够很好地满足不同业务需求。以下通过具体场景示例来讲解解耦、异步处理、削峰填谷、可靠性和扩展性这几个关键词。

解耦

假设有一个电商系统,每当用户下单时需要触发一系列操作如库存更新、订单记录生成等。如果不使用消息队列,则这些逻辑需要串行执行或直接调用,这不仅增加了系统的复杂度,也使得各个组件间的依赖关系变得紧密。而采用RocketMQ后,订单服务可以作为生产者将订单信息发送到特定的主题(Topic)上,后续的库存服务和订单记录服务作为消费者从该主题订阅并处理相关信息。这样即使某个下游服务出现故障,也不会直接影响整个购物流程的正常运行。

异步处理

考虑一个在线支付平台,在用户完成支付动作之后,除了立即返回支付结果给前端外,后台还需要执行诸如积分更新、优惠券发放等一系列操作。如果所有步骤都同步进行,则会大大增加响应时间。此时利用RocketMQ可以让支付服务快速确认交易成功并向客户端反馈,同时异步地将相关事件发布出去供其他模块订阅处理,从而有效提升了用户体验和服务效率。

剥峰填谷

对于一些具有明显访问高峰期的应用程序来说(比如节假日促销期间的电商平台),短时间内涌入大量请求可能会导致服务器压力剧增甚至崩溃。借助于RocketMQ这样的消息中间件,可以在流量高峰时段将超出处理能力范围内的请求暂存起来,并以可控速率逐步分发给后端服务进行处理,以此实现流量平滑化,保护核心业务不受冲击。

可靠性

数据传输过程中的安全性和完整性至关重要。例如,在金融交易场景下,每笔交易都需要被准确无误地记录下来。RocketMQ支持事务消息功能,保证了消息发送与本地事务的一致性;同时它还提供了消息持久化存储机制以及重试策略,确保即便在网络不稳定或者系统异常情况下也能最终完成消息传递,极大增强了系统的健壮性。

扩展性

随着业务规模的增长,往往需要对现有架构进行横向扩展以应对更高的并发请求量。通过引入RocketMQ,我们可以很容易地添加更多的生产者实例来分担消息生产任务,或者部署额外的消费者实例以加速消息消费速度。由于消费者组的存在,新增节点无需改变已有配置即可自动参与到负载均衡中去,从而简化了扩展过程并提高了整体吞吐量。

消息队列的主要产品可选项:

在线业务场景适合:
RocketMQ专为高并发、低延迟和高可用性设计,特别适用于金融级的实时交易处理。它支持事务消息,确保分布式系统中的数据一致性。此外,RocketMQ提供了灵活的消息类型,包括顺序消息、定时/延时消息等,非常适合复杂的在线业务需求。

大数据传输适合:
Kafka在大规模数据处理场景中表现出色,尤其是日志收集与流式数据处理。其核心优势在于单文件存储结构,这使得Kafka在处理大量连续写入的数据时能够实现极高的效率。因此,对于需要高效处理海量数据的应用来说,Kafka是理想的选择。

需要JMS标准实现适合:
ActiveMQ作为一款完全兼容JMS1.1规范的消息中间件,非常适合那些依赖于Java企业级应用环境的项目。除了提供丰富的消息协议支持外,ActiveMQ还具备强大的功能集,如持久化消息存储、分布式的部署模式等,可以满足多种复杂的消息路由需求。

amqp等多细微小场景适合:
RabbitMQ以其对AMQP(高级消息队列协议)的支持闻名,同时兼容STOMP、MQTT等多种协议,非常适合物联网设备间的通信及微服务架构下的解耦需求。尽管RocketMQ也在增加对这些协议的支持,但目前RabbitMQ仍是这类应用场景下的首选解决方案之一。

详细的使用MQ收发消息的例子(以rocketmq为例)

详细的使用MQ收发消息的例子(以RocketMQ为例)

1. 加入依赖

首先,在项目的pom.xml文件中添加对RocketMQ客户端库的依赖。这一步是必要的,以便在你的Java应用中使用RocketMQ的功能。

1 <dependency>
2 <groupId>org.apache.rocketmq</groupId>
3
4 <artifactId>rocketmq-client</artifactId>
5
6 <version>4.9.1</version>
7
8 </dependency>

对于Gradle项目,对应的依赖声明如下:

1 implementation 'org.apache.rocketmq:rocketmq-client:4.9.1'

确保使用的版本与你本地或远程运行的RocketMQ服务端兼容。

2. 消息发送

下面是一个简单的生产者示例,它向指定的主题发送同步消息。这里也展示了如何配置和启动一个DefaultMQProducer实例。

 1 import org.apache.rocketmq.client.producer.DefaultMQProducer;
2 import org.apache.rocketmq.common.message.Message;
3
4 public class Producer {
5 public static void main(String[] args) throws Exception {
6 // 创建生产者实例,并设置生产者组名
7 DefaultMQProducer producer = new DefaultMQProducer("my-group");
8 // 设置NameServer地址
9 producer.setNamesrvAddr("localhost:9876");
10 // 启动生产者
11 producer.start();
12
13 for (int i = 0; i < 10; i++) {
14 // 创建一条消息,指定主题、标签及消息内容
15 Message msg = new Message("test-topic-1", "TagA", ("Hello RocketMQ " + i).getBytes());
16
17 // 发送消息到Broker
18 producer.send(msg);
19 }
20
21 // 关闭生产者
22 producer.shutdown();
23 }
24 }

3. 消费消息

接下来,展示一个消费者例子,说明如何订阅特定主题的消息并处理它们。此例采用了推送模式下的DefaultMQPushConsumer

 1 import org.apache.rocketmq.client.consumer.DefaultMQPushConsumer;
2 import org.apache.rocketmq.client.consumer.listener.ConsumeConcurrentlyContext;
3 import org.apache.rocketmq.client.consumer.listener.ConsumeConcurrentlyStatus;
4 import org.apache.rocketmq.client.consumer.listener.MessageListenerConcurrently;
5 import org.apache.rocketmq.common.message.MessageExt;
6
7 import java.util.List;
8
9 public class Consumer {
10 public static void main(String[] args) throws Exception {
11 // 创建消费者实例,并设定消费者组名
12 DefaultMQPushConsumer consumer = new DefaultMQPushConsumer("my-consumer_group");
13 // 设置NameServer地址
14 consumer.setNamesrvAddr("localhost:9876");
15 // 订阅一个或多个Topic,并通过tag过滤所需的消息
16 consumer.subscribe("test-topic-1", "*");
17 // 注册消息监听器,当有新消息到达时会触发onMessage方法
18 consumer.registerMessageListener(new MessageListenerConcurrently() {
19 @Override
20 public ConsumeConcurrentlyStatus consumeMessage(List<MessageExt> msgs, ConsumeConcurrentlyContext context) {
21 System.out.printf("%s Receive New Messages: %s %n", Thread.currentThread().getName(), msgs);
22 return ConsumeConcurrentlyStatus.CONSUME_SUCCESS;
23 }
24 });
25 // 启动消费者
26 consumer.start();
27 System.out.printf("Consumer Started.%n");
28 }
29 }

为什么这样做可以实现异步解耦?

通过上述步骤,我们能够利用RocketMQ实现消息的异步通信,从而达到系统组件之间的解耦效果。生产者将消息发布到特定的主题上,而不必关心哪些消费者将会接收这些消息;同样地,消费者只需订阅感兴趣的主题即可获取信息,无需直接与生产者交互。这种方式不仅简化了系统的复杂度,还提高了其可扩展性和灵活性。例如,在订单系统中,当用户下单后,可以立即发送一个包含订单详情的消息给库存管理服务,后者可以在空闲时处理该请求而不会阻塞用户的操作流程。此外,RocketMQ支持多种消息类型(如顺序消息、延时消息等),使得开发者可以根据具体需求选择最适合的消息模型来进一步优化应用程序的设计。

Java消息队列入门详解的更多相关文章

  1. ActiveMQ学习总结(5)——Java消息服务JMS详解

    JMS: Java消息服务(Java Message Service) JMS是用于访问企业消息系统的开发商中立的API.企业消息系统可以协助应用软件通过网络进行消息交互. JMS的编程过程很简单,概 ...

  2. GCP消息队列Pubsub详解,简单好用还不用自己运维

    我最新最全的文章都在南瓜慢说 www.pkslow.com,欢迎大家来喝茶! 1 简介 GCP的Pubsub是一种异步消息传递服务,可将生产事件的服务与处理事件的服务隔离开.消息队列的作用就不多作介绍 ...

  3. 【FreeRTOS学习04】小白都能懂的 Queue Management 消息队列使用详解

    消息队列作为任务间同步扮演着必不可少的角色: 相关文章 [FreeRTOS实战汇总]小白博主的RTOS学习实战快速进阶之路(持续更新) 文章目录 相关文章 1 前言 2 xQUEUE 3 相关概念 3 ...

  4. JAVA JDK 环境变量配置 入门详解 - 精简归纳

    JAVA JDK 环境变量配置 入门详解 - 精简归纳 JERRY_Z. ~ 2020 / 9 / 13 转载请注明出处!️ 目录 JAVA JDK 环境变量配置 入门详解 - 精简归纳 一.为什么j ...

  5. Sublime Text3 for Java 编译运行环境配置 入门详解 - 精简归纳

    Sublime Text3 for Java 编译运行环境配置 入门详解 - 精简归纳 JERRY_Z. ~ 2020 / 9 / 24 转载请注明出处!️ 目录 Sublime Text3 for ...

  6. Redis快速入门详解

    Redis入门详解 Redis简介 Redis安装 Redis配置 Redis数据类型 Redis功能 持久化 主从复制 事务支持 发布订阅 管道 虚拟内存 Redis性能 Redis部署 Redis ...

  7. Scala 入门详解

    Scala 入门详解 基本语法 Scala 与 Java 的最大区别是:Scala 语句末尾的分号 ; 是可选的 Scala 程序是对象的集合,通过调用彼此的方法来实现消息传递.类,对象,方法,实例变 ...

  8. Quartz 入门详解

    Quartz是OpenSymphony开源组织在Job scheduling领域又一个开源项目,它可以与J2EE与J2SE应用程序相结合也可以单独使用.Quartz可以用来创建简单或为运行十个,百个, ...

  9. java web.xml配置详解(转)

    源出处:java web.xml配置详解 1.常规配置:每一个站的WEB-INF下都有一个web.xml的设定文件,它提供了我们站台的配置设定. web.xml定义: .站台的名称和说明 .针对环境参 ...

  10. WCF中队列服务详解

    WCF中队列服务详解 一.引言 在前面的WCF服务中,它都要求服务与客户端两端都必须启动并且运行,从而实现彼此间的交互.然而,还有相当多的情况希望一个面向服务的应用中拥有离线交互的能力.WCF通过服务 ...

随机推荐

  1. Pytorch使用ReduceLROnPlateau来更新学习率

    如需了解完整代码请跳转到: https://www.emperinter.info/2020/08/05/change-leaning-rate-by-reducelronplateau-in-pyt ...

  2. SeaTunnel DB2 Source Connector 使用文档(含详细操作步骤)

    DB2是IBM的一款关系型数据库管理系统,JDBC DB2 Source Connector是一个用于通过JDBC读取外部数据源数据的连接器.Apache SeaTunnel如何支持JDBC DB2 ...

  3. 移动端100vh的问题与解决方案

    之所以100vh在移动端出现问题,原因大致如上图,真搞不懂,为什么总是有反人类的设计出现. 经过多方参考,实测有效的方案如下: <style> :root { --vh: 1vh; } & ...

  4. Webpack 核心流程

    我们是袋鼠云数栈 UED 团队,致力于打造优秀的一站式数据中台产品.我们始终保持工匠精神,探索前端道路,为社区积累并传播经验价值. 本文作者:霜序 三个阶段 初始化阶段 初始化参数:从配置文件.配置对 ...

  5. JAVA学习——JDK开发环境配置

    2024/07/08 一.JDK下载 二.安装与JDK开发环境配置(Windows) 三.安装与JDK开发环境配置(Linux) 一.JDK下载与安装 网址: https://www.oracle.c ...

  6. vscode 安装历史版本

    修改版本号为想要下载的版本即可 https://update.code.visualstudio.com/{版本}/win32-x64-archive/stable vscode 历史版本地址:Vis ...

  7. VC 单文档FormView视图增加打印预览

    1修改my.rc文件二处 3 TEXTINCLUDE BEGIN "#define _AFX_NO_OLE_RESOURCES\r\n" "#define _AFX_NO ...

  8. 如何排查线上w3wp.exe CPU高的问题,使用到了WinDbg、Visual studio来分析IIS进程池的.dmp文件

    最近发现服务器上某个web站点老是CPU很高,该站点部署在IIS上,我IIS上有多个站点,每个站点一个进程池,每个进程池取名都是根据站点来取的,所以很容易看出哪个站点吃掉的CPU,该站点已运行十几年, ...

  9. Vue SPA项目如何修改网站标题

    直接贴 门户项目代码 // 全局router 直接挂载路由导航守卫 router.beforeEach((to, from, next) => { if (to.meta.title) { va ...

  10. 技术教程 | 基于 Web 端的屏幕共享实践

    ​ 屏幕共享的英文叫做 DesktopSharing,通俗点讲就是将自己电脑的画面分享给其他人, 被分享的可以是整个电脑屏幕.应用程序或者某一个打开的网页等等. 而随着音视频领域的深入发展,完备的功能 ...