栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 大数据系统

有关k8s中部署hadoop出现的特殊问题

有关k8s中部署hadoop出现的特殊问题

WARN datanode.DataNode: Problem connecting to server: namenode:8020

 出现此处类似的问题,说明Datanode 缓存 namenode DNS 查找失败并且无法启动

如果 DataNode 启动而 NameNode 主机甚至无法在 DNS 中解析,则 DataNode 不会尝试重新解析。我提供了一个补丁,可以将 DNS 解析移动到连接重试循环中。

目前hadoop还未修复这个问题,将在3.4.0, 3.3.2, 3.2.4的版本中修复。

最新版本出来后,我会更新此贴。

如果你们急需修复,可以通过修改源码的方式修正bug。

具体更改内容,请参考https://github.com/apache/hadoop/pull/3348/commits/c8d5b06ff8c2e7629d0bdf5713b7cf35f87bdad6https://github.com/apache/hadoop/pull/3348/commits/c8d5b06ff8c2e7629d0bdf5713b7cf35f87bdad6

 

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/433765.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号