问题描述:
将项目打包到集群上
就会出现卡死
原因分析:
查看日志
可能是
内存和CPU资源太少,不能满足Hadoop和Hive运行所需的默认资源需求
解决方案: 在yarn-site.xml添加如下配置
yarn.nodemanager.resource.memory-mb 20480 yarn.scheduler.minimum-allocation-mb 2048 yarn.nodemanager.vmem-pmem-ratio 2.1
在mapred-site.xml修改配置
mapreduce.framework.name yarn
改为
mapreduce.job.tracker hdfs://192.168.1.120:8001 true
ip为master上ip



