栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 大数据系统

FlinkStandaloneHA集群搭建

FlinkStandaloneHA集群搭建

FlinkStandaloneHA集群搭建

本次安装是基于CDH环境下安装
flink相关jar包下载:flink1.11.1版本下载
hadoop连接jar包:连接包下载直达通道
如果嫌麻烦,百度网盘直达车:
链接: flink相关jar包
提取码:1234

上传flink安装包到指定目录

使用Xftp上传到指定位置

解压jar包
tar -zxvf flink-1.11.1-bin-scala_2.11.tgz
修改配置文件
cd flink-1.11.1/conf/
vim flink-conf.yaml
修改如下配置



以防默认8081端口号被占用修改默认端口号

修改maser配置
vim masters


实现高可用配置两台主节点

配置workers
vim workers

下载hadoop连接jar包
cd flink-1.11.1/bin/
wget https://repo.maven.apache.org/maven2/org/apache/flink/flink-shaded-hadoop-2-uber/2.6.5-10.0/flink-shaded-hadoop-2-uber-2.6.5-10.0.jar

如果不想下载最上面有链接地址

分发配置完成flink包
scp -r flink-1.11.1/ srv192:`pwd`
scp -r flink-1.11.1/ srv193:`pwd`
hdfs创建存储的目录文件夹
sudo -u hdfs hadoop fs -chown root /
hadoop fs -mkdir -p /flink/ha
hadoop fs -ls /
hadoop fs -ls /flink

启动flink
bin/start-cluster.sh

jps查看是否启动成功

查看WEBUI页面
http://10.1.50.191:8082



自此搭建配置完成,自行测试HA,如有疑问请在下方留言,或者私信都可以

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/662877.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号