
RPC服务器端代码在获取Server对象后,Server对象就要真正开始干活啦。服务器端代码马上会启动Server对象监听网络上的RPC请求....
数据仓库元数据管理 一、元数据简介二、Atlas简介三、安装配置1.安装依赖2.安装步骤 四、Hive血缘关系导入 一、元数据简....
Flink的状态与容错是这个框架很核心的知识点。其中一致检查点也就是Checkpoints也是Flink故障恢复机制的核心,这篇文章将详....
zookeeper-3.4.9和hbase-1.2.4安装 zookeeper-3.4.9安装 解压 tar -zxvf zookeeper-3.4.9.tar.gz 移动 mv zookeeper-3.4.9 /....
PerJob 模式 考虑到集群的资源隔离情况,一般生产上的任务都会选择per job模式,也就是每个任务启动一个flink集群,各个集....
前言 也许漫漫长夜里带给你温暖的恰恰是那不会动情亦不会改变的代码。 —–2021年10月29日21:44:06 文章目录 正文整....
问题描述 很久以前实习的时候接触flink,并且在此方面做了很多工作,但是过了几年时间,居然再次搭建 kafka-flink 会遇到那....
模板虚拟机环境准备 安装模板虚拟机,IP地址192.168.10.100、主机名称hadoop100、内存4G、硬盘50G 红色可安自己情况而定 Lin....
一、简介 Apache Kafka是一个开源消息系统项目,由Scala写成。该项目的目标是为处理实时数据提供一个统一、....
docker hub地址 hub地址 mysql 拉取镜像docker pull mysql:5.7 创建本地挂载目录mkdir -p /home/volume/mysql/data /home/vo....
一.spark单节点部署 # 1.安装java环境# 略# 2.安装scala环境wget https://downloads.lightbend.com/scala/2.13.6/scala-2.13....
目录 一、下载地址二、安装JDK环境三、安装Zookeeper 一、下载地址 zookeeper下载地址:http://archive.apache.org/dist/z....
# 查看集群的健康状态GET /_cat/health?v# 查看节点状态GET /_cat/nodes?v# 查看索引的状态GET /_cat/indices?v# 创建一个索....
前言 本篇文章介绍KafKa的核心概念,其中包含了topic、生产者、消费者、leader选举的机制、消息如何进行分片选择,以及流式....
为什么要顺序消费 保证消息的顺序消费是生产业务场景下经常面临的挑战,例如电商的下单逻辑,在用户下单之后,会发送创建订....
1、Hive不支持等值连接(hive中不能使用省去join的写法) 2、分号字符(hive对分号的识别没有那么智能,有时需要进行转义 “....
Docker未授权访问 漏洞简述: Docker是一个开源引擎,可以轻松的为任何应用创建一个轻....
spark是一种基于内存的快速、通用、可扩展的大数据分析计算引擎。 注意!!!主要作用就是做大数据的分析计算!不做其他的功....
实验报告册,拿来吧~ 大数据技术实验报告册实验一:HDFS读写文件实验二:应用MapRedeuce排序数据实验三:应用Hi....