栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 大数据系统

四、配置spark

四、配置spark

进入spark的conf目录

[root@master conf]#cd /usr/cstor/spark/conf

 复制文件

 [root@master conf]# cp slaves.template slaves

 编辑配置文件,把文件里面的localhost删除

[root@master conf]# vim slaves

slave1

slave2

 复制文件

[root@master conf]# cp spark-env.sh.template spark-env.sh

 编写配置文件spark-env.sh,配置hadoop和jdk

[root@master conf]# vim spark-env.sh

 

 把文件分发给slave1 和slave2

[root@master conf]# scp -r /usr/cstor/spark/ root@slave1:/usr/cstor

[root@master conf]# scp -r /usr/cstor/spark/ root@slave2:/usr/cstor

 启动spark

[root@master conf]# sbin/start-all.sh

[root@master conf]# jps
327 NameNode
754 SecondaryNameNode
3040 Jps
557 DataNode
2791 Master
1539 HMaster

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/663090.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号