Docker-Dockerfile讲解(二)

最新推荐文章于 2025-08-22 20:49:08 发布

Java面试教程

最新推荐文章于 2025-08-22 20:49:08 发布

阅读量282

点赞数 5

CC 4.0 BY-SA版权

文章标签： docker java 容器

本文链接：https://blog.csdn.net/2401_89221704/article/details/144772235

背景

最近同事发现线上发送的RocketMQ消息太大，同事为了节省网络带宽和存储空间，手动压缩消息然后再进行消息发送，发现磁盘也没有明显的缩减

所以我打算结合源码告诉他RocketMQ自带的消息压缩

同时听了发出了这个表情包

RocketMQ版本

5.1.0

为什么需要压缩消息

首先说一下为什么需要消息压缩，原因其实很简单。就是为了节省网络带宽和存储空间。

在哪里压缩消息

我们的消息压缩可以在很多个地方进行

有两种方案

在client端进行压缩

比如我们可以在Producer发送消息的时候进行消息压缩

然后将压缩后的消息发送到Broker，broker只管存储

等到consumer需要消息的时候，原封不动的推送给消费者，由consumer自己进行解压缩

这种方式的好处是broker不需要关心消息的压缩和解压缩，只需要存储消息即可

在broker端进行压缩

这种方式就是Producer发送消息的时候，不进行压缩

RocketMQ在存储的时候自己进行消息压缩，consumer进行消息拉取的时候，broker进行消息解压缩，然后推送给consumer

这种方式就是消耗broker cpu，也不能节省网络带宽，只能节省存储空间

所以很明显是在client端进行压缩比较好

源码分析

这里我们来具体结合源码分析下

在消息发送org.apache.rocketmq.client.impl.producer.DefaultMQProducerImpl.sendKernelImpl方法中会对消息进行压缩判断

tryToCompressMessage 消息压缩

什么消息会被压缩呢？

java

代码解读

复制代码

private boolean tryToCompressMessage(final Message msg) { if (msg instanceof MessageBatch) { //batch does not support compressing right now return false; } byte[] body = msg.getBody(); if (body != null) { if (body.length >= this.defaultMQProducer.getCompressMsgBodyOverHowmuch()) { try { byte[] data = compressor.compress(body, compressLevel); if (data != null) { msg.setBody(data); return true; } } catch (IOException e) { log.error("tryToCompressMessage exception", e); log.warn(msg.toString()); } } } return false; }