大数据知识_大数据学习笔记

使用方式：flink的安装包解压之后，即可直接使用，而不需要额外的配置。 参考：flink部署说明文档   01 几点结论 1.yarn-s....

Zookeeper从单机到集群分布式 场景 安装及配置 解压 tar -zxvf apache-zookeeper-3.6.0-bin.tar.gz 重命名 mv apache-zoo....

目录 前言： 安装hadoop： hadoop单机配置： hadoop伪分布配置： 关于一些遇到的报错： 总结： 前言： 由于笔者最近有比赛，....

CDH整合Flink（CDH6.3.2+Flink1.12.0）_mp9105的博客-CSDN博客          flink run -m yarn-cluster -yn 1 -yjm 1024 ....

一、Student package nj.zb.kb15.demo3;//ctrl + 点击 进入//ctrl + T 查看方法//F4右侧展现方法//查看当前类方法结构ctrl ....

相比map个数的控制复杂性，reduce个数的设定要相对简单多了，reduce的个数一般最后决定了输出文件的个数，二者相等，如果想....

4. 时区更改（中国时区） 操作环境: master、slave1、slave2 在/etc/profile中加入：TZ='Asia/Shanghai'; export ....

有很多人想要转行到Java，但是不知道从哪开始下手！其实学习Java并不难，只要制定好学习路线，跟着自己的计划一步步去做就没....

一、参考资料 1. 电商行为数据分析 Flink 入门教程_Vioao's Blog-CSDN博客_flink入门 尚硅谷Java版Flink（武老师清华硕....

Flink流批一体化处理框架 一、简介二、框架对比三、编程实现1.流处理2.批处理 四、结语 一、简介 Apache Flink 是一个框架....

目录 一.ElasticSearch概述 二.ElasticSearch的使用 一.ElasticSearch概述 Elasticsearch是一个实时分布式搜索和分析引....

spark是用来进行分布式计算的，那分布式计算要解决那些问题呢？ 得知道数据在哪吧多个节点，如何把任何分发到各个节点：任务....

一、TopScore package nj.zb.kb15.demo4;import org.apache.hadoop.io.WritableComparable;import java.io.DataInput;import....

一、准备工作： 搭建要求：一主三从的Centos7环境的虚拟机 部署安排：选取master节点为客户端,slave为hive端,slave2为MySQL....

我的namedata进程突然之间没有的原因：是因为我之前没有停止hadoopd的集群又重新启动hadoopde集群 还有其他原因也会导致比如....

我的原创地址：https://dongkelun.com/2021/05/19/localSparkHiveWithKerberos/ 前言 因为公司的测试环境带有kerberos，而我....

ElasticSearch 基础教程 1.概念2.使用场景：3.基本概念1.NRT2.Cluster3.Node4.Index5.Type6.Document7.Shards & Replicas ....

Elasticsearch是个开源分布式搜索引擎，它的特点有：分布式，零配置，自动发现，索引自动分片，索引副本机制，restful风格接....

文章目录 一、说明二、JavaAPI操作ES总结1.操作索引2.操作文档 三、JavaAPI操作ESp19）索引-创建p20）索引-查询p20）索引....

文章目录 项目场景：问题描述：原因分析：解决方案： 项目场景： 系统：Ubuntu20.04 Hadoop版本：Hadoop3.3.1 Hbase版本：H....