目前，Hadoop作业调度器主要有三种：FIFO（先进先出调度器）、Capacity Scheduler（容量调度器）和Fair Scheduler（公平调度....
ELK作为一套日志收集工具，顾名思义，ELK包含了三个开源工具，它们分别是elasticsearch、logstash、kibana，其中elasticsear....
1.需要对防火墙进行配置 不关闭防火墙的话,需要开放15672和5672两个端口,一个是连接控制台,一个是连接服务 firewall-cmd --z....
org.apache.kafka.common.errors.TimeoutException: Timeout of 60000ms expired before the position for partition aaa-0 coul
组件版本关系 Spring Cloud Alibaba Version Sentinel Version Nacos Version RocketMQ Version Dubbo Version Seata Versio....
本文主要针对MapReduce1.0相关概念进行介绍，主要参考厦大林子雨教授的mooc，结合自己理解总结成文。 文章目录 简介背景比....
Hadoop的RPC是基于socket的半双工通信机制，两边如果需要互相向对方传数据则需要建立两个通道；还要注意同一时间只能存在一....
Hadoop技术内幕：深入解析YARN架构设计与实现原理 Hadoop技术内幕：深入解析YARN架构设计与实现原理 董西成 ◆ 第2章 YARN....
文章目录 前言一、安装mysql数据库（我们安装Mysql分支--MariaDB）二、熟悉mysql常用命令，包括sql命令 三、命令专题查询排....
随着人工智能、互联网、物联网、区块链等新一代信息技术的普及应用，社会的信息化、数字化程度不断加深。在疫情的影响下，整....
1、多次INSERT单次扫描表 使用场景： --当需要多次从一张分区表查出某分区的数据放到一张新表时，下边SQL会多次扫描表。INSE....
Kafka3.0学习—外部系统集成 一、集成Flume1.Flume生产者2.Flume消费者 二、集成Flink1.Flink生产者2.Flink消费者 三、集....
环境 ZooKeeper、Kafka。 如果使用 docker-compose 部署 Kafka 集群，可以参考我的这篇文章 docker-compose安装Kafka集群 依....
第一步 安装rabbitmq【rabbitmq基于Erlang】 安装erlang 1.1 选择对应版本需要下载合适版本的Erlang。地址：https://github.....
大饼又涨了上来，昨晚最高突破了四万美金，以太坊最高突破了三千美金，这波还是挺意外的，利空出现没跌反而涨，估计是狗庄在....
kafka学习 1、kafka怎么保证消息的消费顺序？ kafka只保证单partition有序，如果Kafka要保证多个partition有序，不仅broker....
文章目录 spark-shell脚本spark-submit脚本spark-class脚本总结 spark-shell脚本 function main() { if $cygwin; then ....
问题描述 在学习Hadoop集群配置中，当我基本配置完成后，打开 jps 查看进程后发现进程是比正常的五个少的，经过排查之后发现....
【大数据数仓】宽表和窄表的区别 一、宽表 （1）宽表：从字面意义上讲就是字段比较多的数据库表。通常是指业务主题相关的指....
elasticsearch.yml配置 注意：集群名称一定要一致，端口号要不同，通信端口要不同 ① 节点1 //配置集群名称cluster.name: el....
名师互学网 版权所有 (c)2021-2022 ICP备案号：晋ICP备2021003244-6号
