RabbitMQ

本文详细介绍了RabbitMQ的引入背景、特点、安装过程、架构及组件,包括Producer、Consumer、Exchange和Queue。深入讲解了RabbitMQ的使用方法,如Hello-World、Work模式、Publish/Subscribe、Routing和Topic等。同时,文章阐述了如何在SpringBoot中整合RabbitMQ,并讨论了消息的可靠性和避免重复消费的策略。最后,通过实际应用案例展示了RabbitMQ在客户模块的应用。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

RabbitMQ

一、引言

模块之间的耦合度多高,导致一个模块宕机后,全部功能都不能用了,并且同步通讯的成本过高,用户体验差。

RabbitMQ引言

二、RabbitMQ介绍

市面上比较火爆的几款MQ:

ActiveMQ,RocketMQ,Kafka,RabbitMQ。

  • 语言支持:ActiveMQ,RocketMQ只支持Java语言,Kafka可以支持多门语言,RabbitMQ支持多种语言。
  • 效率方面:ActiveMQ,RocketMQ,Kafka效率都是毫秒级别,RabbitMQ是微妙级别的。
  • 消息丢失,消息重复问题:RabbitMQ针对消息的持久化,和重复问题都有比较成熟的解决方案。
  • 学习成本:RabbitMQ非常简单。

RabbitMQ严格的遵循AMQP协议,高级消息队列协议,帮助我们在进程之间传递异步消息。

三、RabbitMQ安装

version: "3.1"
services:
  rabbitmq:
    image: daocloud.io/library/rabbitmq:management
    restart: always
    container_name: rabbitmq
    ports:
      - 5672:5672
      - 15672:15672
    volumes:
      - ./data:/var/lib/rabbitmq

四、RabbitMQ架构

4.1 官方的简单架构图

  • Publisher-生产者:发布消息到RabbitMQ中的Exchange
  • Consumer-消费者:监听RabbitMQ中的Queue中的消息
  • Exchange-交换机:和生产者建立连接并接收生产者的消息
  • Queue-队列:Exchange会将消息分发到指定的Queue,Queue和消费者进行交互
  • Routes-路由:交换机以什么样的策略将消息分发到Queue

简单架构图

4.2 RabbitMQ的完成架构图

完整架构图

完整架构图

4.3 查看图形化界面并创建一个Virtual Host

创建一个全新的用户和全新的Virtual Host,并且将test用户设置上可以操作/test的权限

监控界面

五、RabbitMQ的使用

5.1 RabbitMQ的通讯方式

通讯方式

5.2 Java连接RabbitMQ

5.2.1 创建maven项目

5.2.2 导入依赖
<dependencies>
    <dependency>
        <groupId>com.rabbitmq</groupId>
        <artifactId>amqp-client</artifactId>
        <version>5.6.0</version>
    </dependency>
    
    <dependency>
        <groupId>junit</groupId>
        <artifactId>junit</artifactId>
        <version>4.12</version>
    </dependency>
</dependencies>
5.2.3 创建工具类连接RabbitMQ
public static Connection getConnection(){
    //创建Connection工厂
    ConnectionFactory factory = new ConnectionFactory();
    factory.setHost("192.168.199.109");
    factory.setPort(5672);
    factory.setUsername("test");
    factory.setPassword("test");
    factory.setVirtualHost("/test");
    
    //创建Connection
    Connection conn = null;
    try{
        conn = factory.newConnection();
    } catch(Exception e){
        e.printStackTrace();
    }
    //返回
    return conn;
}

效果图

5.3 Hello-World

一个生产者,一个默认的交换机,一个队列,一个消费者

结构图

创建生产者,创建一个channel,发布消息到exchange,指定路由规划。

@Test
public void publish() throws Exception {
    //1.获取Connection
    //2.创建Channel
    //3.发布消息到exchange,同时指定路由的规则
    String msg = "Hello-World";
    //参数1:指定exchange,使用""。
    //参数2:指定路由的规则,使用具体的队列名称。
    //参数3:指定指定传递的消息所携带的properties,使用null。
    //参数4:指定发布的具体消息,byte[]类型。
    channel.basicPulish("","HelloWorld",null,msg.getBytes());
    //Ps:exchange是不会帮你将消息持久化到本地的,Queue才会帮你持久化消息。
    System.out.println("生产者发布消息成功!");
    //4.释放资源
    channel.close();
    connection.close();
}

5.4 Work

一个生产者,一个默认的交换机,一个队列,两个消费者

结构图2

只需要在消费者端,添加Qos能力以及更改为手动ack即可让消费者,根据自己的能力去雄安飞指定的消息,而不是默认情况下有RabbitMQ平均分配了,生产者不变,正常发布消息到默认的exchange,并指定routing

消费者指定Qos和手动ack

//1.指定当前消费者,一次消费多少个消息
channel.basicQos(1);
DefaultConsumer consumer = new DefaultConsumer(channel){
    @Override
    public void handleDelivery(String consumerTag,Envelope envelope,AMQP.BasicProperties properties,byte[] body) throws IOException {
        try{
            Thread.sleep(100);
        } catch {
            e.printStackTrace();
        }
        System.out.println("消费者1号接收到消息:"+new String(body,"UTF-8"));
        
        //2.手动ack
        channel.basicAck(envelope.getDeliveryTag(),false);
    }
};
//3.指定手动ack
channel.basicConsume();

5.5 Publish/Subscribe

一个生产者,一个交换机,两个队列,两个消费者

结构图3

声明一个Fanout类型的exchange,并且将exchange和queue绑定在一起,绑定的方式就是直接绑定。

让生产者创建一个exchange并且指定类型,和一个或多个队列绑定到一起。

//3.创建exchange - 绑定某一个队列
//参数1:exchange的名称
//参数2:指定exchange的类型 FANOUT - pubsub,DIRECT - Routing,TOPIC - Topics
channel.exchangeDeclare("pubsub-exchange",BuiltinExchangeType.FANOUT);
channel.queueBind("pubsub-queue1","pubsub-exchange","");
channel.queueBind("pubsub-queue1","pubsub-exchange","");

消费者还是正常的监听某一个队列即可。

5.6 Routing

一个生产者,一个交换机,两个队列,两个消费者

结构图4

生产者在创建DIRECT类型的exchange后,根据RoutingKey去绑定相应的队列,并且在发送消息时,指定消息的具体RoutingKey即可。

//3.创建exchange,routing-queue-error,routing-queue-info
channel.exchangeDeclare("routing-exchange",BuiltinExchangeType.DIRECT);
channel.queueBind("routing-queue-error","routing-exchange","ERROR");
channel.queueBind("routing-queue-info","routing-exchange","INFO");

//4.发布消息到exchange,同时指定路由的规则
channel.basicPublish("routing-exchange","ERROR",null,"ERROR".getBytes());
channel.basicPublish("routing-exchange","INFO",null,"INFO1".getBytes());
channel.basicPublish("routing-exchange","INFO",null,"INFO2".getBytes());
channel.basicPublish("routing-exchange","INFO",null,"INFO3".getBytes());

消费者没有变化

5.7 Topic

一个生产者,一个交换机,两个队列,两个消费者

结构图5

生产者创建Topic的exchange并且绑定到队列中,这次绑定可以通过*和#关键字,对指定RoutingKey内容,编写时注意格式xxx.xxx.xxx去编写,* ->一个xxx,而 # ->代表多个xxx.xxx,在发送消息时,指定具体的RoutingKey到底是什么。

//2.创建exchange并指定绑定方式
channel.exchangeDeclare("topic-exchange",BuiltinExchangeType.TOPIC);
channel.queueBind("topic-queue-1","topic-exchange","*.red.*");
channel.queueBind("topic-queue-2","topic-exchange","fast.#");
channel.queueBind("topic-queue-3","topic-exchange","*.*.rabbit");

//3.发布消息到exchange,同时指定路由的规则
channel.basicPublish("topic-exchange","fast.red.monkey",null,"红快猴子".getBytes());
channel.basicPublish("topic-exchange","slow.black.dog",null,"黑漫狗".getBytes());
channel.basicPublish("topic-exchange","fast.white.cat",null,"快白猫".getBytes());

消费者只是监听队列,没变化。

六、RabbitMQ整合SpringBoot

6.1 SpringBoot整合RabbitMQ

6.1.1 创建SpringBoot工程
6.1.2 导入依赖
<dependency>
    <groupId>org.srpingframwork.boot</groupId>
    <artifactId>spring-boot-starter-amqp</artifactId>
</dependency>
6.1.3 编写配置文件
spring:
  rabbitmq:
    host: 192.168.199.109
    port: 5672
    username: test
    password: test
    virtual-host: /test
6.1.4 声明exchange、queue
@Configuration
public class RabbitMQConfig{
    //1.创建exchange - topic
    @Bean
    public TopicExchange getTopicExchange(){
        return new TopicExchange("boot-topic-exchange",true,false);
    }
    
    //2.创建queue
    @Bean
    public Queue getQueue(){
        return new Queue("boot-queue",true,false,false,null);
    }
    
    //3.绑定到一起
    @Bean
    public Binding getBinding(TopicExchange topicExchange,Queue queue){
        return BindingBuilder.bind(queue).to(topicExchange).with("*.red.*");
    }
}
6.1.5 发布消息到RabbitMQ
@Autowired
private RabbitTemplate rabbitTemplate;

@Test
void contextLoads(){
    rabbitTemplate.convertAndSend("boot-topic-exchange","slow.red.dog","红色大狼狗!!");
}
6.1.6 创建消费者监听消息
@Component
public class Consumer{
    @RabbitListener(queues = "boot-queue")
    public void getMessage(Object message){
        System.out.println("接收到消息:" + message);
    }
}

6.2 手动Ack

6.2.1 添加配置文件
spring:
  rabbitmq:
    listener:
      simple:
        acknowledge-mode: manual

七、RabbitMQ的其他操作

7.1 消息的可靠性

RabbitMQ的事务:事务可以保证消息100%传递,可以通过事务的回滚去记录日志,后面定时再次发送当前消息。事务的操作,效率太低,加了事务操作后,比平时的操作效率至少要慢100倍。

RabbitMQ除了事务,还提供了Confirm的确认机制,这个效率比事务高很多。

7.1.1 普通Confirm方式
//3.1开启confirm
channel.confirmSelect();
//3.2发送消息
String msg = "Hello-World!";
channel.basicPublish("","HelloWorld",null,msg.getBytes());
//3.3判断消息是否发送成功
if(channel.waitForConfirms()){
    System.out.println("消息发送成功");
}else{
    System.out.println("发送消息失败");
}
7.1.2 批量Confirm方式
//3.1开启confirm
channel.confirmSelect();
//3.2批量发送消息
for(int i = 0;i < 1000;i++){
    String msg = "Hello-World!" + i;
    channel.basicPublish("","HelloWorld",null,msg.getBytes());
}
//3.3确定批量操作是否成功
channel.waitForConfirmsOrDie();
7.1.3 异步Confirm方式。
//3.1开启confirm
channel.fonfirmSelect();
//3.2批量发送消息
for(int i = 0;i < 1000;i++){
    String msg = "Hello-World" + i;
    channel.basicPublish("","HelloWorld",null,msg.getBytes());
}
//3.3开启异步回调
channel.addConfirmListener(new ConfirmListener(){
    @Override
    public void handleAck(long deliveryTag,boolean multiple) throws IOException{
        System.out.println("消息发送成功,标识:" + deliveryTag + ",是否是批量" + multiple);
    }
    
    @Override
    public void handleNack(long deliveryTag,boolean multiple) throws IOException{
        System.out.println("消息发送失败,标识:" + deliveryTag + ",是否是批量" + multiple);
    }
});

消息传递可靠性

7.1.4 Return机制

Confirm只能保证消息到达exchange,无法保证消息可以被exchange分发到指定queue。

而且exchange是不能持久化消息的,queue是可以持久化消息。

采用Return机制来监听消息是否从exchange送到了指定的queue中

消息传递可靠性2

开启Return机制,并在发送消息时,指定mandatory为true

//开启return机制
channel.addReturnListener(new ReturnListener(){
    @Override
    public void handleReturn(int replyCode,String replyText,String routingKey,AMQP.BasicProperties properties,byte[] body) throws IOException{
        //当消息没有送达到queue时,才会执行。
        System.out.println(new String(body,"UTF-8") + "没有送达到Queue中!!");
    }
});

//在发送消息时,指定mandatory参数为true
channel.basicPublish("","HelloWorld",true,null,msg.getBytes());

7.2 SpringBoot实现

7.2.1 编写配置文件
spring:
  rabbitmq:
    publisher-confirm-type: simple
    publisher-returns: true
7.2.2 开启Confirm和Return
@Component
public class PublisherConfirmAndReturnConfig implements RabbitTemplate.ConfirmCallback,RabbitTemplate.ReturnCallback{
    @Autowired
    private RabbitTemplate rabbitTemplate;
    
    @PostConstruct//init-method
    public void initMethod(){
        rabbitTemplate.setConfirmCallback(this);
        rabbitTemplate.setReturnCallback(this);
    }
    
    @Override
    public void confirm(CorrelationData correlationData,boolean ack,String cause){
        if(ack){
            System.out.println("消息已经送达到Exchange");
        }else{
            System.out.println("消息没有送达到Exchange");
        }
    }
    
    @Override
    public void returnMessage(Message message,int replyCode,String replyText,String exchange,String routingKey){
        System.out.println("消息没有送达到Queue");
    }
}

7.3 避免消息重复消费

重复消费消息,会对非幂等性操作造成问题

重复消费消息的原因是,消费者没有给RabbitMQ一个ack

重复消费

为了解决消息重复消费的问题,可以采用Redis,在消费者消费消息之前,先将消息的id放到Redis中,

id-0(正在执行业务)

id-1(执行业务功能)

如果ack失败,在RabbitMQ将消息交给其他的消费者时,先执行setnx,如果key已经存在,获取他的值,如果是0,当前消费者就什么都不做,如果是1,直接ack。

极端情况:第一个消费者在执行业务时,出现了死锁,在setnx的基础上,再给key设置一个生存时间。

生产者,发送消息时,指定messageId

AMQP.BasicProperties properties = new AMQP.BasicProperties().builder()
    .deliveryMode(1)
    .messageId(UUID.randomUUID().toString())
    .build();
String msg = "Hello-World!";
channel.basicPublish("","HelloWorld",true,properties,msg.getBytes());

消费者,在消费消息时,根据具体业务逻辑去操作redis

DefaultConsumer consume = new DefaultConsumer(channel){
    @Override
    public void handlerDelivery(String consumerTag,Encelope envelope,AMQP.BasicProperties properties,byte[] body) throws IOException{
        Jedis jedis = new Jedis("192.168.199.109",6379);
        String messageId = properties.getMessageId();
        //1.setnx到Redis中,默认指定value-0
        String result = jedis.set(messageId,"0","NX","EX",10);
        if(result != null && result.equalsIgnoreCase("OK")){
            System.out.println("接收到消息:" + new String(body,"UTF-8"));
            //2.消费成功,set messageId 1
            jedis.set(messageId,"1");
            channel.basicAck(envelope.getDeliveryTag(),false);
        }else{
            //3.如果1中的setnx失败,获取key对应的value,如果是0,return,如果是1
            String s = jedis.get(messageId);
            if("1".equalsIgnoreCase(s)){
                channel.basicAck(envelope.getDeliveryTag(),false);
            }
        }
    }
}

7.4 SpringBoot如何实现

7.4.1 导入依赖
<dependency>
    <groupId>org.springframework.boot</groupId>
    <artifactId>spring-boot-starter-data-redis</artifactId>
</dependency>
7.4.2 编写配置文件
spring:
  redis:
    host: 192.168.199.109
    port: 6379
7.4.3 修改生产者
@Test
void contextLoads() throws IOException {
    CorrelationData messageId = new CorrelationData(UUID.randomUUID().toString());
    rabbitTemplate.convertAndSend("boot-topic-exchange","slow.red.dog","红色大狼狗!!",messageId);
    System.in.read();
}
7.4.4 修改消费者
@Autowired
private StringRedisTemplate redisTemplate;

@RabbitListener(queue = "boot-queue")
public void getMessage(String msg,Channel channel,Message message) throws IOException{
    //0.获取MessageId
    String messageId = message.getMessageProperties().getHeader("spring_returned_message_correlation");
    //1.设置key到Redis
    if(){
        //2.消费消息
        System.out.println("接收到消息:" + msg);
        
        //3.设置key的value为1
        redisTemplate.opsForValue().set(messageId,"1",10,TimeUnit.SECONDS);
        //4.手动ack
        channel.basicAck(message.getMessageProperties().getDeliveryTag(),false);
    }else{
        //5.获取Redis中的value即可,如果是1,手动ack
        if("1".equalsIgnoreCase(reidsTemplate.opsForValue().get(messageId))){
            channel.basicAck(message.getMessageProperties().getDeliveryTag(),false);
        }
    }
}

八、RabbitMQ应用

8.1 客户模块

8.1.1 导入依赖
<dependency>
    <groupId>org.springframework.boot</groupId>
    <artifactId>spring-boot-starter-amqp</artifactId>
</dependency>
8.1.2 编写配置文件
spring:
  rabbitmq:
    host: 192.168.199.109
    port: 5672
    username: test
    username: test
    virtual-host: /test
8.1.3 编写配置类
@Configuration
public class RabbitMQConfig{
    
    @Bean
    public TopicExchange topicExchange(){
        return new TopicExchange("openapi-customer-exchange",true,false);
    }
    
    @Bean
    public Queue queue(){
        return new Queue("openapi-customer-queue");
    }
    
    @Bean
    public Binding binding(){
        return BindingBuilder.bind(queue).to(topicExchange).with("openapi-customer.*");
    }
}
8.1.4 修改Service
//3.发送消息

/*//3.调用搜索模块,添加数据到ES
		//1.准备请求参数和请求头信息
		String json = JSON.toJSON(customer);
		HttpHeaders headers = new HttpHeaders();
		headers.setContextType(MediaType.parseMediaType("application/json;charset=utf-8"));
		HttpEntity<String> entity = new HttpEntity<>(json,headers);
		//2.使用RestTemplate调用搜索模块
		restTemplate.postForObject("http://localhost:8080",entity,String.calss);*/

8.2 客户模块

8.2.1 导入依赖
<dependency>
    <groupId>org.springframework.boot</groupId>
    <artifactId>spring-boot-stater-amqp</artifactId>
</dependency>
8.2.2 编写配置文件
spring:
  rabbitmq:
    host: 192.168.199.109
    port: 5672
    username: test
    password: test
    virtual-host: /test
    listener:
      simple:
        acknowledge-mode: manual
8.2.3 编写配置类
@Configuration
public class RabbitMQConfig {
    
    @Bean
    public TopicExchange topicExchange() {
        return new TopicExchange("openapi-customer-exchange",true,false);
    }
    
    @Bean
    public Queue queue() {
        return new Queue("openapi-customer-queue");
    }
    
    @Bean
    public Binding binding(Queue queue, TopicExchange topicExchange) {
        return BindingBuilder.bind(queue).to(topicExchange).with("openapi.customer.*");
    }
}
8.2.4 编写消费者
@Component
public class CustomerListener{
    
    @Autowired
    private CustomerService customerService;
    
    @RabbitListener(queues = "openapi-customer-queue")
    public void consume(String json,Channel channel,Message message) throws IOException{
        //1.获取RoutingKey
        String receiveRoutingKey = message.getMessageProperties().getReceiveRoutingKey();
        //2.使用switch
        switch(receiveRoutingKey){
            case "openapi.customer.add":
                //3.add操作调用Service完成添加
                customerService.saveCustomer(JSON.parseJSON(josn,Customer.class));
                //4.手动ack
                channel.basicAck(message.getMessageProperties().getDeliveryTag(),false);
        }
    }
}
### RabbitMQ 使用指南和教程 #### 安装 RabbitMQ RabbitMQ 是一种基于 AMQP 协议的消息中间件,用于实现分布式系统的可靠消息传递。以下是安装 RabbitMQ 的基本流程: 1. **安装 Erlang** RabbitMQ 基于 Erlang 编程语言开发,因此需要先安装 Erlang 运行环境。可以通过包管理器或者下载官方二进制文件完成安装。 2. **安装 RabbitMQ Server** 下载并安装 RabbitMQ Server 软件包。对于 Linux 用户,可以使用以下命令: ```bash sudo apt-get install rabbitmq-server ``` 3. **启动服务** 启动 RabbitMQ 服务后,默认监听端口为 `5672`(AMQP 协议),Web 管理界面默认运行在 `15672` 端口上。 ```bash sudo systemctl start rabbitmq-server ``` 4. **启用 Web 管理插件** 可通过以下命令启用 RabbitMQ 提供的 Web 管理工具: ```bash sudo rabbitmq-plugins enable rabbitmq_management ``` --- #### 配置用户与权限 为了安全访问 RabbitMQ 实例,通常需要创建自定义用户并分配相应权限。 - 创建新用户: ```bash rabbitmqctl add_user rabbitmq 211314 ``` 此操作会新增名为 `rabbitmq` 的用户,并将其密码设为 `211314`[^1]。 - 设置用户角色: ```bash rabbitmqctl set_user_tags rabbitmq administrator ``` 将该用户的标签设定为管理员角色,使其拥有完全控制权[^1]。 - 授予用户权限: ```bash rabbitmqctl set_permissions -p "/" rabbitmq ".*" ".*" ".*" ``` 上述命令授予用户对根虚拟主机 `/` 中所有资源的操作权限[^1]。 - 查看现有用户及其角色: ```bash rabbitmqctl list_users ``` --- #### 集群配置 RabbitMQ 支持多种集群模式来提升可用性和性能。主要分为两类:普通模式和镜像模式。 - **普通模式** 在这种模式下,各节点独立存储队列中的数据和其他元信息(如交换机)。当客户端尝试消费某个不在当前连接节点上的消息时,目标节点会被请求转发所需的数据[^2]。 - **镜像模式** 对比之下,在镜像模式中,指定队列的内容将在多个节点间保持一致副本。即使部分成员失效,剩余存活节点仍能继续提供完整的服务功能[^2]。 > 注意事项:尽管镜像模式提高了可靠性,但也带来了额外开销——网络流量增加以及写入延迟上升等问题需被充分考虑进去。 --- #### 应用集成示例 假设要在一个 Java 或 Python 应用程序里利用 RabbitMQ 来发送/接收消息,则可能涉及以下几个步骤: 1. **声明交换器 (Exchange)** 和绑定关系: ```java channel.exchangeDeclare(exchangeName, "direct", true); channel.queueDeclare(queueName, true, false, false, null); channel.queueBind(queueName, exchangeName, routingKey); ``` 如此一来便完成了持久化队列及路由键关联工作[^3]。 2. 发布一条测试消息至上述已建立好的通道路径之中; 3. 订阅对应主题下的事件流以便实时捕获最新动态更新情况; --- #### 总结 以上涵盖了从基础安装到高级特性使用的整个过程概述。希望这些指导能够帮助您快速掌握如何部署与维护属于自己的 RabbitMQ 平台实例! 问题
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

周景洛

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值