栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 大数据系统

Flink Standalone HA集群安装&测试

Flink Standalone HA集群安装&测试

第一步环境准备
前提环境:hadoop zookeeper 环境准备,本篇是flink jobManager HA集群搭建,hadoop zookeeper就不多做赘述
     准备四台服务器:node100 node101 node102 node103
     jobManager:node100 node101
     taskManager:node101 node102 node103
本篇讲述的Flink 版本为 1.9.2
安装步骤 第一步 修改配置文件conf/flink-conf.yaml
high-availability: zookeeper
high-availability.storageDir: hdfs://node100:9000/flink/ha/ 保存JobManager恢复
所需要的所有元数据信息
high-availability.zookeeper.quorum: node100:2181,node101:2181,node102:2181
zookeeper地址
第二步 修改配置文件conf/masters
node100:8081
node101:8081
同步文件到各个节点 下载支持Hadoop插件并且拷贝到各个节点的安装包的lib目录下
https://repo.maven.apache.org/maven2/org/apache/flink/flink-shaded-hadoop-2-
uber/2.6.5-10.0/flink-shaded-hadoop-2-uber-2.6.5-10.0.jar
集群HA测试
HA集群测试
http://node01:8081/
http://node02:8081/
两个页面一模一样 存在bug


如上图所示 Flink 1.9.2版本 web页面存在点小bug,看不出来那个是主哪个是从
转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/677023.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号