大数据知识_大数据学习笔记

从上帝视角看一下消息发送和消费 当我们使用RocketMQ时，RocketMQ-Dashboard是一个非常好用的图形化界面工具 我们首先在Roc....

出现大量unacked 配置 @Bean public SimpleRabbitListenerContainerFactory rabbitListenerContainerFactory() { SimpleRab....

1.内部表操作 指定建表存放hdfs位置 文章目录 1.内部表操作指定建表存放hdfs位置从已有表复制创建复制数据复制表结构不复制....

目录 1.修改某个索引的分片数 2.es 写入超时 3.重索引 4.es常用命令 5.华为云es开启安全模式,客户端使用方法 6.运维的一些命....

Spark开发环境搭建 1）Scala环境 1. 前置说明 安装与配置Scala开发环境。 实验平台直达链接 Scala是一种函数式面向对象语言....

一、交易柜台简介 依据国内监管要求，客户无法直连交易所系统，中间必须经过经纪公司的柜台系统，由经纪公司柜台系统调用交....

HIVE 增加修改删除字段 非分区表增加字段修改字段(修改字段名称、类型、注释、顺序)删除字段 分区表新增字段 非分区表 ....

目录 1. 设计目标2. 使用场景3. Zookeeper特性3.1 会话3.2 数据模型3.3 节点类型3.4 节点状态属性3.5 ACL机制 4. 常用命令4....

一、需求调研、框架的设计思想 1、什么是消息队列         消息（Message）是指在应用间传送的数据。消息可以非常简....

座位预约小程序 后台用的是springboot框架写的 数据库是mysql 用到了中间件rabbitmq 具体功能 1：用户登录注册 2：选择时间....

一、什么是累加器 累加器（Accumulators）与广播变量（Broadcast Variables）共同作为Spark提供的两大共享变量，主要用于跨....

背景 我国的十四五规划中，明确指出了文化产业中，地方旅游业的重要地位。《建议》提出规范发展文化产业园区，推动区域文化....

目录 1.克隆虚拟机2.配置主机ip映射3.ssh免密码登录4.搭建Hadoop高可用集群4.1安装ZooKeeper4.2配置ZooKeeper 5.安装hadoop....

1 概述 1.1 城市数字孪生 城市数字孪生是运用数字技术在物理城市与数字城市之间建立相互映射的关联关系，通过对物理实体、规....

ElasticSearch 全文检索，简称ES，基于以前的 Lucene 开源搜索引擎。所采0用的的是倒排索引所以速度很快。详情如下。 在学习....

3.16 自从早上的kafka被拿下之后，我今天的进度异常顺利，果然版本对了啥都不容易错，版本错了啥都是错的。平常看视频最多也....

Apache Kafka 是一个开源分布式事件流平台，被数千家公司用于高性能数据管道、流分析、数据集成和关键任务应用程序。 1. kaf....

本文 Flink 版本为 1.14.3。 本文主要讲解如何将 Flink 和 Springboot 两大框架融合在一起， 可以对接 SpringCloud 生态系....

目录 1.1HDFS 的架构 1.2 HDFS 的架构 1.3 HDFS 采用的是主从架构模型（Master/Slave） 2.1 HDFS 的优势 2.2  HDFS 的劣势....

文章目录 Python语言介绍Python特点：hello World变量Python数据类型：**布尔类型：**逻辑判断，true，false**列表：****运....