大数据知识_大数据学习笔记

步骤如下 1.安装zk: helm install zookeeper bitnami/zookeeper --set replicaCount=1 --set auth.enabled=false --se....

消息丢失场景 MQ消息丢失场景主要有三个： 1.消息生产者，发送消息后，rabbitmq服务器没有收到；导致消息丢失 2.rabbitmq收....

工作中常常会遇到同样的代码需要hive和presto的自如切换场景，常见的sql语句又没有很了熟于心时，一份常用函数参照表便显得....

9.30 14:30 一面 实习： 实习做了什么介绍实习的项目数据结构： 有哪些数据结构 链表和数组的区别跳表的原理和插入过程场景....

♚Hadoop的认识 1.hadoop是google公司三篇论文思想的实现 ①hdfs—gfs ②mapreduce-mapreduce③hbase-bigtable 2.hadoop版本....

数据开发平台 统一的计算平台（ MaxCompute ）、统一的开发平台（ D2 等相关平 台和工具）、统一的数据模型规范和统一的数据....

RabbitMQ进阶 RabbitMQ进阶，是对RabbitMQ基础进行一个补充，里面涵盖了集成SpringBoot框架的使用，以及集群搭建，已经集....

编者按： 本文为 TiDB Hackathon 2020 比赛中 TiFlink 项目最新进展的介绍，使用 TiKV 和 Flink 实现了强一致的物化视图的功....

提供了 1.创建链接 2.创建命名空间 3.判断表存在与否 4.创建表 5.修改表 6.删除表 7.插入数据 8.查询数据 9.扫描数据 10.删....

本系列基于spark-2.4.6 通过上一节的分析，我们了解了Spark中ShuflleMapTask中Map端数据的写入流程，这个章节我们分析下Redu....

1.ES核心概念 索引字段类型(mapping)文档(document) elasticsearch是面向文档，关系行数据库和elasticsearch客观对比! Re....

文章目录 一.Sink之JDBC概述二.pom文件配置三.MySQL配置四.编写Java代码五.运行Flink程序查看数据参考: 一.Sink之JDBC概述 F....

前言 本篇文章会介绍Kafka，了解kafka是什么，主要用途是什么，了解kafka的特性，以及kafka集群安装，kafka核心概念、工作原....

flink cdc sql 开发模板 flink cdc sql 读mysql的binlog日志，实时同步到mysql开发模板 使用flink cdc前提条件：读取目标库....

1、搜索镜像 docker search rabbitmq:management# --：management 参数表示带有管理后台 搜寻结果： NAME ....

文章目录 1 前言2 用户画像分析概述2.1 用户画像构建的相关技术2.2 标签体系2.3 标签优先级 3 实站 - 百货商场用户画像描述....

前言 说明安装hive之前，系统已经安装好了 java，hadoop，mysql。 版本说明 java jdk1.8 haoop 3.2.2 hive 3.1.2 目前hive官....

查询sql进行不使用select *，而是select具体字段，节省资源，减少网络开销，*查询时，很可能就不会使用到覆盖索引，就会造成....

文章目录 一.Flink中的时间语义二.EventTime的引入三. Watermark3.1 概念3.2 Watermark的特点3.3 Watermark的传递3.4 Waterm....