栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 软件开发 > 后端开发 > Java

定位 RabbitMQ 内存一直上涨的原因

Java 更新时间: 发布时间: IT归档 最新发布 模块sitemap 名妆网 法律咨询 聚返吧 英语巴士网 伯小乐 网商动力

定位 RabbitMQ 内存一直上涨的原因

前言

因业务需要,项目中用到了许多延时队列,采用 RabbitMQ 的延时队列插件实现。

ps

紧急情况下,可以修改内存阈值,重启生效

echo "vm_memory_high_watermark.relative = 0.8" >> /etc/rabbitmq/rabbitmq.conf

因为和内存有关自然而然就想到,会不会是因为节点是 RAM 节点导致的,但是单节点情况下默认是 DISK 节点,所以这个可以排除。

查看内存

点击节点

内存用了好多,快撑不住了。

查看内存使用情况

可以看到 internal database tables 占用了特别多的内存

有关 internal database tables ,顾名思义,就是内部数据库的表

使用 rabbitmqctl status 命令查看内存使用情况


发现 mnesia 占用了大部分内存。

通过官方文档发现 mnesia 和 internal database tables 的关系
https://www.rabbitmq.com/memory-use.html

Mnesia 是一个分布式数据库,RabbitMQ 使用它来存储有关用户、交换器、队列和绑定的信息。

网上大部分都会说,消息不存储在数据库中,但是 rabbitmq-server 的 mkuratczyk 在 issues 回复我说,延时队列是个例外。
https://github.com/rabbitmq/rabbitmq-server/issues/5080

获取 mnesia 中各个表中数据条数

rabbitmqctl eval 'mnesia:schema().' | grep -E 'Properties|size'
root@myRabbit2:/# rabbitmqctl eval 'mnesia:schema().' | grep -E 'Properties|size'
-- Properties for gm_group table ---
size -> 0
-- Properties for mirrored_sup_childspec table ---
size -> 0
-- Properties for rabbit_delayed_messagerabbit@myRabbit2 table ---
size -> 6008272
-- Properties for rabbit_delayed_messagerabbit@myRabbit2_index table ---
size -> 1051188
-- Properties for rabbit_durable_exchange table ---
size -> 12
-- Properties for rabbit_durable_queue table ---
size -> 5

可以看到延时队列的表数据量在600w左右,这些消息都是不满足延时条件的,一旦延时条件满足,这些消息就会回到队列中,等待被消费。

问题定位完毕,因为延时队列的特殊性,消息在延时条件满足前需要存在 mnesia 中,而 mnesia 的数据会加载到内存中。

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/984825.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号