大数据系统知识_大数据系统学习笔记

kafka知识点小记

文章目录 选择题总结 (89个题)第1章 大数据技术概述 (10个题)第2章 Scala 语言基础 (20个题)第3章 Spark的设计与运行原理 (1....

背景         想用LDAP方式连接，结果忘记了密码，还好beeline 通过kerberos 可以连接。         网上的一些博....

1、变量：在程序的执行过程中，其值可以发生改变的量叫变量。     定义变量的格式：         1、数据类型 变量名 = 初....

R语言使用moments包计算偏度（Skewness）和峰度（Kurtosis）实战：计算偏度（Skewness）和峰度（Kurtosis）、确定样本数据是....

维度模型是数据仓库领域大师Ralph Kimball 所倡导，以分析决策的需求出发构建模型，构建的数据模型为分析需求服务，所以它重....

ssh免密登录配置(方便 scp 在各服务器之间进行文件传输) 每个节点执行 ssh-keygen -t rsa生成公钥私钥文件，并指定为rsa类型....

00_课程内容大纲： （1）大数据导论         数据与数据分析           数据分析作用和方向（商业领域）：....

序号精通系列视频突击读书巩固计划完成时间实际完成时间1MongoDB黑马MongoDB1月9日2JavaScript3Vue4uniapp5SpringBoot + Vue....

PartitionStateMachine分区状态转换实现 1 我为何读这源码？ PartitionStateMachine，分区状态机负责管理Kafka分区状态的转....

前期准备： 一、前期准备 （1）Hadoop集群已配置完毕 （2）linux系统安装jdk （3）在linux系统中安装并破解IntelliJ IDEA ....

一、概述 rocketmq详解(全) NameServer NameServer可以部署多个，相互之间独立，其他角色同时向多个NameServer机器上报状....

由于需要安装presto345，需要将JDK换成了11+的版本，导致Hadoop集群不能启动ResourceManager和NodeManager 查看日志，发现的....

毛主席曾说过：我是靠总结经验吃饭的。 学会总结，是一个人成长的重要能力。过去2021年，针对自己关心的重大问题思考总结，....

2021-12-27 2021SC@SDUSC—DolphinScheduler（14） 1。 1.Worker Server日志脱敏 对日志中的密码进行脱敏。worker的日志是通....

前言 在很多业务场景下，需要对原始的数据读取分析后，将输出的结果按照指定的业务字段进行排序输出，方便上层应用对结果数....

1、首先创建好虚拟机并且上传jdk，hadoop到虚拟机上 这边我上传的位置为/opt/module 下，并将其解压到/opt/software下并且重....

文章目录 大数据相关工具Maxwell数据实时同步工具Maxwell 简介MySQL Binlog 介绍1. Binlog简介2. Binlog的日志格式 Mysql....

大家好，我是老吴，大家也可以叫我吴同学，再小一点的朋友也可以叫我吴师兄。欢迎大家跟我一起走进数据分析的世界，一起学习....

zookeeper端口 2181 对Client端提供服务的端口。 3888 选举Leader。 2888 集群内的机器通讯使用。（Leader使用此端口）