
文件下载 Java 8 ZooKeeper 3.6.3 Kafka 3.0.0 下载到本地。 使用Xftp或其他工具上传到虚拟机。 Java 解压: [root@MiWiF....
RDD编程基础 RDD的创建 从文件系统中加载数据创建RDD (1) 从本地文件系统中加载数据 scala> val lines = sc.textFile("fil....
注:配套安装: Hadoop 3.1.3 Zookeeper3.5.7 Hbase2.2.0 一、文件解压 cd /opt/ software/ tar -zxvf hbase-2.2.0-bi....
springcloud stream 3.x版本 消费者分组消费 消费者分组消费组件自动实现分组解决方案 前言:stream组件升级到3.x以上版本....
这里写目录标题 前言一、elasticsearch设置密码首先开启 X-Pack测试是否设置成功修改密码已知密码修改忘记密码 二、kiban....
目录 项目解决方案 一、核心业务流程 1、快递单 2、运单 3、干线运输 二、逻辑架构 三、数据流转 四、项目的技术选型 1、流....
Elasticsearch是面向文档(document oriented)的,这意味着它可以存储整个对象或文档(document)。然而它不仅仅是存储(store....
1、扎实的java基础。 2、熟练使用基本的框架。 3、有过二中框架或者web中间件的源码研究经历。 4、经历过大并发挑战,并且有....
PageRank算法 PageRank算法原理剖析及Spark实现 - 简书 (jianshu.com) import org.apache.spark.SparkContextimport or....
1)与其他计算框架共享集群资源(eg.Spark框架与MapReduce框架同时运行,如果不用Yarn进行资源分配,MapReduce分到的内存资....
工作中遇到的一个数据治理问题:治理出某地常住人口的地址变更内容,并按时间升序后合并展示。 举个例子,小明2019年住在A地....
一.配置介绍 1.首先先给大家看一下我买的2021新款M1MacbookPro的配置 我买的这款就是16英寸的运行内存为16个g的最低配189....
Hadoop入门 Hadoop入门一、环境准备二、Hadoop✧HDFS1、 分布式文件系统架构2、HDFS数据分类①、DataNode②....
文章目录 初学者的Java学习路线Java基础JavaWeb常用框架技术微服务开发分布式高级项目实战就业与面试 架构师的职业规划1、....
全文概览 今天的实战由以下内容组成: 开发一个最简单的flink任务,在IDEA上以local模式运行; 下载flink1.9.2源码; 修....
配置jdk(因为zookeeper是用java写的) 下载java的tar文件,然后解压到指定目录,进入解压后的java文件夹,复制java文件夹....
1)一个Spark作业运行时包括一个Driver进程,也是作业的主进程,具有main函数,并且有SparkContext的实例,是程序的人口点;....
文章目录 一、什么是MQ?二、为什么要用MQ?(一)流量消锋(二)应用解耦(三)异步处理 三、MQ的分类(一)ActiveMQ(二....
实验 220211127 1+X 中级实操考试样题 目录 前言 步骤 2:完成实体类 Student 步骤 3:完成实体类 Course 步骤 4:完成实....
1、环境,基于java开发环境(jdk1.8及以上,node.js) 2、首先下载elk三剑客(这里以7.6.2为例子,elk需要版本统一) 连接:ht....