大数据知识_大数据学习笔记

目录 1、为什么要数据分析？ 2、什么场景下用数据分析？ 3、数据分析的方法 1、为什么要数据分析？        数据分析能....

情景描述：总共7台机器，每天几亿条数据，数据源->Flume->Kafka->HDFS->Hive面临问题：数据统计主要用HiveSQL，没有数据倾斜....

Spark 3.2.0 Standalone 集群部署 整体概述版本选择安装步骤 整体概述 Spark3.2.0 在Centos7 部署安装教程 版本选择 jdk-8....

1.Zookeeper=文件系统+通知机制2.Zookeeper特点1）Zookeeper：一个领导者（Leader），多个跟随者（Follower）组成的集群2）....

1.从信息传播行为上来看，传统的报纸杂志、广播节目、电视频道等媒体，主要针对的是一群用户的需求。这是指新媒体的（ ）特....

概念： 1.生产者：消息的创造者 2.交换机：其功能就是接收生产者生产出来的消息，并分发消息给相应的消费者 3.消费者：消息....

前言： 在了解let var const 之前，建议先了解一下ECMAScript也就是所谓的ES标准，我们所有使用的JavaScript脚本语言（JS）....

数仓建模：关系建模，维度建模，范式建模 关系建模有点像维度建模里的雪花模型：关系模型主要应用与OLTP 系统中，为了保证数....

前言 今天在B站上看RabbitMQ的教学视频，心想跟着操作一下吧，毕竟动动手印象才能深刻一些，于是就开始了~ 1. RabbitMQ下载 ....

农户台账：查询数据来源为1且区划以**开始的 GET /homestead_household/_search{ "query": { "bool": { "must": [ ....

文章目录 一、DES1. 加密和解密2. DES的结构(Feistel网络) 二、3DES1. 3DES加密2. 3DES解密 三、AES 一、DES 1. ....

Element Black将建立一个NFT交易服务平台。同时，依托创始团队丰富的艺术品经纪和A类认证拍卖行背景，建立完整的交易和资产....

springcloud使用zookeeper作为注册中心时，在docker中运行zk容器但总是连接不上。 纰漏一 ./zkServer.sh start之后没有使用z....

Delta Lake 版本管理 前面我们在学习Delta Lake 时间旅行的时候已经提到过这个版本管理了，但是我们没有深入探究，其实版本....

估值报告的使用者：起诉人员只能是估值报告的使用者。一般包括委托方、业务约定书中约定的其他报告使用者和法律法规明确的估....

持久化的概念 上一篇测试已经看到了如何处理任务不丢失的情况，但是如何保障当 RabbitMQ 服务停掉以后消 息生产者发送过来的....

什么是MQ MQ就是消息队列，通过典型的生产者和消费者模型，生产者不停的向消息队列中生产消息，消费者不停的从消息队列中....

Tableau Prep经验总结 Tableau Prep定义 ​ Tableau Prep是tableau家族的数据准备工具。我们进行数据分析时，有时拿到的数据....

文章目录 一、创建springboot项目二、导入es依赖坐标三、创建实体类四、创建dao层五、添加配置类六、测试 一、创建springboo....

2021SC@SDUSC 目录 compact源码分析 2021SC@SDUSC  接上一篇继续分析 compact源码分析 现在来看第十一步——替换StoreFiles....