大数据系统知识_大数据系统学习笔记

客流统计方案，最早应用于国外，主要应用在商超，或者公共场地，进行准确的客流统计，整合销售数据，进行运营分析和KPI考核....

简介 Kafka是一个分布式、支持分区的（partition）、多副本的（replication）的基于发布/订阅模式的消息队列，主要应用于大....

RabbitMQ的消息应答以及不公平分发 RabbitMQ的消息应答机制 什么是RabbitMQ的消息应答 为了保证消息在发送过程中不丢失，rab....

写数据原理 写流程直接请求发送给Leader节点 这里假设集群中有三个zookeeper服务端 ACK (Acknowledge character）即是确认....

代码和具体笔记直接放到gitee了,不然还要再写一个md文档没啥意义很麻烦 代码地址,在zookeeper对应的文件夹下面

1.总体原则 1.Yarn配置 Yarn部署在单台服务器128G内存，32个核 如果一个服务器是5个核， executor-cores=5,则理论上num-exec....

消息传递语义 at most once:最多一次。消息可能丢失也可能被处理，但最多只会处理一次 at least once:至少一次。消息不会丢....

上篇文章介绍了Prometheus Server自身的高可用方案，但除了Prometheus Server外，Alertmanager也是整个告警体系里面重要的组....

目录 Linux问题问题答案 Zookeeper问题问题答案 Linux 问题 shell计算的三种方式?shell函数的返回值区间是多少?如何获取一....

文章目录 SpringData 框架集成代码实现 SpringData 框架集成 SpringData 用于简化数据库 , 非关系型数据库访问的框架. 目....

一、es安装 1.1、配置 config/elasticsearch.yml # 打开节点名称node.name: chb2# 这里的node-1为node-name配置的值cluster.....

一、环境准备 服务集群机器 描述：使用Oracle VM VirtualBox搭建部署的五台虚拟机，使用系统Centos(2009) 192.168.1.11 bigd....

初始化 hdfs namenode -format 启动 start-dfs.sh 创建目录 hdfs dfs -mkdir test / hdfs dfs -mkdir -p user/root 上传文件....

最近几年，随着人口红利逐渐消失，越来越的行业和领域开始重视用户增长，而增长黑客这一概念也开始被普遍提及，甚至很多招聘....

一、修改pom.xml文件 7.14.2 2.10.0 org.springframework spring-beans 5.2.6.RELEASE org.springfr....

作者：肯梦 企业数字化转型过程中，天然会遇到消息路由，异地多活，协议适配，消息备份等场景。本篇主要通过 EventBridge 消....

这里写自定义目录标题 版本情况基础配置搭建JavaJDK的配置下载Hadoop配置Hadoop环境 版本情况 VMwareWorkstation 12.5 JDK1....

中国集成电路产业投资建议与十四五需求规模分析报告2022版 ════════════════ 《修订日期》：2022年2月 《出....

文章目录 前言一、中文底稿摘要1、问题重述1.1 问题的背景1.2 问题的重述 2、问题分析2.1 问题一分析2.2 问题二分析2.3 问....