前沿技术知识_前沿技术学习笔记

目录 1.mr的核心思想 1.1 什么是Mpareduce  1.2 MR的优缺点 1.3 MR的分片机制 1.3.1输入分片的概念  1.3.2 分片大小的选择....

最过在自学java ，想尝试在linux下学习，想在机器上安装eclipse一直都不成功，都不知道如何下载。在百度上搜索运行yum命令，....

搭建好了Debezium 之后再搭建一下ui 需要注意的是你的Debezium 版本必须为1.4以上 搭建一个UI 并通过 Docker 连接到现有的 K....

简介 Canal是模拟Mysql主从复制原理。将自己伪装成Slave。向主库发起dump协议，拿到bin_log日志，解析之后对数据做相关操作 ....

IDEA 本地运行Spark 1、背景2、环境准备3、 具体流程3.1 IDEA创建maven项目3.2 pom.xml配置3.3 Demo程序示例3.4 结果输出 4....

文章目录 1. 两种模式1.1 普通集群1.2 镜像集群1.3 节点类型 2. 搭建普通集群2.1 预备知识2.2 开始搭建2.3 代码测试2.4 反....

linux环境下项目的搭建 1、 查看最大的挂载磁盘位置 在部署项目之前首先要知道自己的最大的挂载磁盘的位置 df -h 一般情况下....

k8s 弹性伸缩 ScaledObject 文章目录 k8s 弹性伸缩 ScaledObject前言一、ScaledObject yaml二、scaleTargetRefname 三、p....

Elasticsearch8重置elastic用户密码 elastic可以说是es中预留的一个用户名，在按照官网yum安装方法安装启动后通过下面的方式....

前言 logstash是ELK日志管理服务的重要组件之一，本节内容我们实现使用kubesphere管理平台搭建一个可横向扩展的高可用logsta....

入门案例 public static void main(String[] args) throws ExecutionException, InterruptedException { Map config....

在使用Kibana连接ElasticSearch时，在ElasticSearch已经启动的情况下，再去启动Kibana，结果报错： [error][elasticsearch-s....

业务场景 在做east5.0的时候，想要实现hive库迁移mysql库，此时絮叨一个难搞的问题，就是 row_number() over(partition by .....

在hadoop集群搭建的过程中，通常会对集群服务进行群启/群停的操作，而集群中的主机执行启动命令通常需要通过ssh 登录到其它....

概述 Logstash是一个类似实时流水线的开源数据传输引擎，它像一个两头连接不同数据源的数据传输管道，将数据实时地从一个数....

目录 一、jupyter notebook 简介 二、安装jupyter notebook ​ 三、启动jupyter notebook 一、jupyter notebook 简介 Jupyt....

1.现象 spark程序报错后重新启动后报警 22/05/05 10:26:54 ERROR executor.Executor: Exception in task 2.1 in stage 3.0 (....

伴随着云计算时代的到来，互联网应用的多元化发展持续加强，为各类企业和产业的战略升级提供了充分的条件。同时大数据的传输....

根据网上搜的解决方案(基本都是说连接的mysql编码不对)：改alter database hive character set latin1; 但是依然报错，根据....

概述 1.RabbitMQ Erlang语言编写，支持AMQP协议，轻量级。 和其他消息队列不同的是，它在生产者（Producer）和队列（Queue）....