栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 大数据系统

Ambari进程无故挂掉的问题

Ambari进程无故挂掉的问题

测试环境的Ambari进程老是无关无故挂掉,看程序日志也什么都看不出。

查看/var/log/messages日志文件,发现如下日志:

Out of memory: Kill process 31960 (java) score 32 or sacrifice child
Killed process 31960 (java) total-vm:8276748kB, anon-rss:1085284kB, file-rss:0kB, shmem-rss:0kB
java invoked oom-killer: gfp_mask=0x201da, order=0, oom_score_adj=0
java cpuset=/ mems_allowed=0
CPU: 7 PID: 8580 Comm: java Kdump: loaded Not tainted 3.10.0-862.el7.x86_64 #1
Hardware name: VMware, Inc. VMware Virtual Platform/440BX Desktop Reference Platform, BIOS 6.00 07/28/2017

然后查看 /var/run/ambari-server/ambari-server.pid文件,ambari的进程id也正好是31960 。

看起来是系统内存不足导致内核直接杀进程了。
参考文章:https://blog.csdn.net/whatday/article/details/107845356

然后看了下这台机确实部署的东西有点多:除了ambari server,ResouceManame、NodeManager、DataNode、zk等,还有MySQL,都在这台机上。

查看监控,ambari挂掉的这个时间段,cpu使用都到100%了
看yarn的日志,这个时间点好多任务在执行
先把这台机NodeManager关掉,再观察几天还会不会挂

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/632806.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号