大数据系统知识_大数据系统学习笔记

开源创业，近两年在国内受到广泛关注。但是，想要挖掘一个开源项目的商业价值并非易事，开源创业也缺乏成功先例。那开源创业....

1.Flink四大组件 1.1 JobManager 作业管理器 控制一个应用程序执行的主进程，也就是说，每个应用程序都会被一个不同的JobMa....

一、zk安装参考 zookeeper之二：手把手教你安装zookeeper3.7.0（绝对实用） - 北漂程序员 - 博客园前面分享了zookeeper的基....

文章目录 前期准备检查MySQL检查Hadoop 开始安装1、在MySQL中创建hive元数据库2、上传安装包并解压2.1解压 3、配置环境变....

直接开整，只是给自己做个简单学习用，所以随便弄了下 先去官网下载 https://www.elastic.co/cn/downloads/elasticsearch 去....

目录 一.Shell脚本中一些常用参数的解释 二.Shell脚本 1.SSH免密登录配置 2.集群分发文件脚本 3.显示当前所有java进程及其p....

第一步安装erlang环境： 下载： 由于rabbitmq是erlang来写的，所以需要安装erlang环境： https://www.erlang-solutions.com/....

报错信息： flink version：flink-1.13.5cdc version：2.1.1 在使用flinkcdc同步多个表时遇到报错：org.apache.flink.runtim....

Flume安装地址 ·Flume官网地址：http://flume.apache.org/·文档查看地址：http://flume.apache.org/FlumeUserGuide.html·....

参照 大白话 kafka 架构原理 kafka消息队列 出现背景 解耦合 异步处理 秒杀活动 1: 风险控制 、2： 库存锁定 、3： 生成....

张宇然 安科瑞电气股份有限公司 上海嘉定 201801 【摘要】随着我们国家的不断发展，科学技术的不断进步，我们生活中已经不....

部署RabbitMQ集群 创建目录，用于存放Docker Compose部署RabbitMQ集群的yaml文件： mkdir -p /root/composefile/rabbitmq 写....

这里写目录标题 一级目录 二级目录 三级目录 1.1 课程导学 1-2 说明和建议 2-1 -术....

据麦肯锡《物联网：抓住加速机遇》报告预测，到2030年，物联网将在全球创造最高可达12.6万亿美元的经济价值。随着亚马逊、阿....

常用的消息队列 MSMQ:微软自带的消息队列，使用的人少，不开源 rabbitMQ:开源，支持语言多，使用比较广泛，社区支持强 rocke....

hdfs执行balance均衡时间预估 假设原有10个节点数据量347T；现扩容3节点3.7T数据 大约要迁移170T数据出去 假设带宽设置20M一....

文章目录 Hive 1.2.1大数据体系概述Hive架构数据仓库Hive 是什么Hive的安装版本介绍学习Hive安装主要流程 Hive与传统数据....

Numpy 是Python科学计算的一个核心模块。它提供了非常高效的数组对象，以及用于处理这些数组对象的工具。一个Numpy数组由许....

下载 https://archive.apache.org/dist/kafka/2.4.1/kafka_2.11-2.4.1.tgz 解压 改配置(kafka_2.11-2.4.0configserver.pr....

秒杀系统设计与关键技术剖析 1.秒杀系统介绍 秒杀介绍 秒杀是商家通过少量库存和超低价格的方式吸引用户的一种营销手段，让....