栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 大数据系统

“红亚杯”-大数据环境搭建与数据采集技能线上专题赛--总结

“红亚杯”-大数据环境搭建与数据采集技能线上专题赛--总结

4. 时区更改(中国时区)

操作环境: master、slave1、slave2

在/etc/profile中加入:TZ='Asia/Shanghai'; export TZ

5. 确认NTP服务(环境中已经安装)

操作环境: master、slave1、slave2

在master中vim  /etc/ntp.conf

server 127.127.1.0

fudge 127.127.1.0 stratum 10

8. 从节点在早十-晚五时间段内每隔半个小时同步一次主节点时间(24小时制、用户root任务调度crontab)

操作环境: slave1、slave2

crontab -e

*/30 10-17 * * * usr/sbin/ntpdate master

crontab -l

4. 解决jline的版本冲突

操作环境: master、slave1

由于客户端需要和Hadoop通信,为避免jline版本冲突问题,将Hive中lib/jline-2.12.jar拷贝到Hadoop中,保留高版本.

在master  ,slave1中:cp jline-2.12.jar /usr/hadoop/hadoop-2.7.3/share/hadoop/yarn/lib/

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/389059.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号