消息队列基础知识
一、消息队列概述
消息队列(Message Queue,MQ)本质上是一个数据存储队列,用于临时保存和传输消息。
消息中间件是一种基于高效、可靠的消息传递机制,实现跨平台数据通信的工具。它在分布式系统中发挥重要作用,主要用于异步处理、解耦应用、削峰限流、消息通讯,从而提升系统的性能、可用性、扩展性,并确保数据的最终一致性。
目前,常见的消息队列技术包括 ActiveMQ、RabbitMQ、Kafka、RocketMQ 等,每种方案在不同场景下具有独特优势。
二、消息队列应用场景
通常来说,使用消息队列主要能为我们的系统带来下面三点好处:
- 异步处理
- 削峰/限流
- 降低系统耦合性
除了这三点之外,消息队列还有其他的一些应用场景,例如实现分布式事务、顺序保证和数据流处理。
异步处理
在处理用户请求时,涉及到的耗时操作可以通过消息队列实现异步化。请求数据被发送到消息队列后,系统立即返回响应,从而减少用户等待时间,提升交互体验。而后续的业务逻辑则由消息消费者进行处理。
然而,由于数据写入消息队列后便立即返回,后续的校验、数据库写入等环节仍可能失败。因此,在使用消息队列进行异步处理时,需要合理调整业务流程。例如,在用户提交订单后,订单信息会先进入消息队列,此时不应直接告知用户“订单提交成功”。只有当订单消费者完成处理,甚至完成库存扣减后,再通过短信或邮件通知用户订单确认成功,以避免交易纠纷。这与日常购买电影票或火车票的流程类似。
削峰限流
在高并发场景下,比如电商秒杀、促销活动,用户请求会在短时间内激增,可能会直接压垮后端服务。削峰限流的核心思想是利用消息队列作为缓冲区,让请求先进入队列,然后由后端服务按照自身处理能力逐步消费,从而避免系统被突发流量冲击导致崩溃。
削峰限流的工作流程:
- 用户请求激增:活动开始后,短时间内大量订单请求涌入。
- 消息队列缓冲:所有请求先写入消息队列,而不是直接打到数据库或核心业务服务。
- 后端逐步消费:后端系统按照自身的处理能力,有节奏地从队列中取出请求进行处理。
- 避免系统崩溃:即使瞬时流量过大,消息仍然被队列吸收,后端不会被超载。 </