大数据系统知识_大数据系统学习笔记

Spark Executor能跑多少个Task，由Core个数决定 反压原理 反压是指任务（Task）之间的现象；Task是线程，运行Task的是TaskMa....

前言 本文隶属于专栏《大数据技术体系》，该专栏为笔者原创，引用请注明来源，不足和错误之处请在评论区帮忙指出，谢谢！ ....

Centos 7 学习之网桥静态IP设置 （1）使用 yum 安装需要虚拟机可以正常上网，yum 安装前可以先测试下虚拟机联网情 况 [root@....

ㅤㅤㅤ ㅤㅤㅤ ㅤㅤㅤㅤㅤㅤㅤㅤㅤㅤㅤㅤㅤㅤㅤ（活得快乐的最重要因素是人生有事干、有人可去爱，以及生命中有所冀望。——....

目录 参考文章配置hostname，映射文件hosts关闭防火墙，并禁止开机自启设置yum源设置无密钥登陆时间同步安装JDK 1.8安装mysq....

基础定义：详情 组件：详情 API：详情 全局文件：详情 啊这： 啊这： 啊这： 啊这： 啊这： 啊这: uni-ap....

容器本身特性： 采集目标多：容器本身的特性导致采集目标多，需要采集容器内日志、容器 stdout。对于容器内部的文件日志采....

关闭hadoop安全模式命令： hadoop dfsadmin -safemode leave spark启动不了和sqoop启动问题

目录 1 索引模式1.1 创建索引模式1.2 管理模式字段 2. 发现文档2.1 数据发现界面结构2.2 使用时间过滤文档2.3 自定义过滤器....

这周我来到了算法小组，说实话这周的经历可以说是挺波澜的，这一周我从未来小组退了，来到了算法小组进行面试，最后也顺利地....

MQ消息队列 1.项目重启：docker的编排启停指令。2.同步和异步的区别：3.同步调用的问题4.异步调用方案:5.同步异步如何选择：....

01写在前面 大家好，我是阳哥，欢迎来到「Python数据之道」。 本次是《图解Pandas》系列图文内容的 第 1 篇，主要是对Pandas....

1. HDFS文件块大小 HDFS文件在物理上是分块存储的，块的大小可以通过配置参数来进行修改(dfs.blocksize)，在hadoop1.x中默认....

生产者流程 发送流程 创建ProducerRecord对象，包含主题和发送内容，可选指定键和分区键值对象序列化成字节数组数据发送给....

置顶、加精、删除 功能实现 –点击 置顶，修改帖子的类型。 –点击“加精”、“删除”，修改帖子的状态。 1、增加修改帖子状....

Nacos服务自动关闭 在使用Nacos时，有时候会遇到服务自动关闭的情况。这通常涉及到三方面的原因：内存配置、启动方式和关闭....

需要环境和机器【10.0.0.7】 准备3台CentOS服务器，并配置好静态IP、主机名 服务器名IP 说明kafka0110.0.0.80 Kafka节点1kaf....

本文是对之前的五篇文章的汇总和优化。 文章目录 一、安装 JDK1. 解压安装包2. 配置环境变量 二、重命名节点1. 添加主机名....

HDFS 1、HDFS概述1.1、HDFS背景及定义1.2、HDFS的优缺点1.3、HDFS组成架构1.4、HDFS文件块大小 2、HDFS的Shell操作2.1、基....

kafka3.0的基本使用 1.启动kafka服务 进入kafka/bin目录下 ./kafka-server-start.sh -daemon ../config/server.properties ....