云平台知识_云平台学习笔记

文章目录 1 供应链集成系统案例1.1 京东物流一体化供应链1.1.1 算法中台1.1.2 易卜工程化平台 1.2 美团：到店供应链及商品....

每天一个小例子： spark中， 1.left semi join （左半连接）的意思就是， JOIN 子句中右边的表只能在 ON 子句中设置过滤条件....

1.解压tar包 cd /data/app/elk/elk-6.8.5 //此目录结构为自定义，若不存在此结构可自行创建tar zxvf kibana-6.8.5.tar.gz 2.....

算法 paxos、zab、raft 服务注册与配置 ZooKeeper、Eureka、Nacos、Consul、Etcd 关于CP还是AP的选择：选择 AP，因为可用....

Hadoop启动时，没有启动DataNode 1、问题2、原因3、解决办法3.1 删除 dfs 文件夹（dfs文件夹中没有重要的数据）3.2 复制 clu....

亲爱的社区小伙伴们，我们很高兴地宣布，StreamX 今天迎来了 1.2.3 Release 版本的正式发布！本次增加了诸多新特性，修复了....

学习hadoop遇到的问题 idea版本和maven版本冲突 查看别人的解决方案：1 error role: org.apache.maven.model.validation.Mod....

在系统开发的初期以及使用的初期，一般不会太过于在意数据库的设计以及sql语句的优化，这就会导致系统有可能在日积月累的海....

文章目录 1 数据来源2 数据可视化2.1 数量可视化1. 男性运动员年龄分布直方图2. 女性运动员年龄分布直方图3. 全体运动员年龄....

文章目录 引言一、ES 安装二、head 插件安装三、Kibana 安装四、IK分词器 安装 引言 由于后续都基于 Elasticsearch 7.10.2....

编译Spark源码 一、修改SqlBase4添加语法规则二、 Maven编译antlr三、修改SqlParsqlParser.scala中四、运行 一、修改SqlBa....

本资源整理了互联网黑话词汇表，包含“赋能、抓手、闭环、沉淀、打通”等阿里味儿词汇，分享给需要的朋友。     资源整....

ImportError: cannot import name ‘soft_unicode’ from 'markupsafe’和ImportError: cannot import name ‘TypedDic....

编译Spark源码 一、环境准备二、编译三、IDE导入执行SparkPi.scala 一、环境准备 1、JDK1.8 2、scala 2.12.15 3、maven 3.8....

本文来说下kafka可视化客户端工具（Kafka Tool）的使用 文章目录 概述下载地址如何使用本文小结 概述 Kafka Tool是一个....

工作中使用hive进行数据预处理，有时候需要对数据抽样来做一些评估分析。下面记录通过python进行分层随机抽样的过程。 使用p....

版本信息： kafka_2.12-3.1.0、apache-zookeeper-3.8.0 报错信息： [2022-03-16 05:30:57,192] WARN An exception was throw....

第一种 查看是否关闭防火墙          第二种         关闭集群 stop-all.sh         删掉core-site....

实时ETL开发之流计算程序【编程】 编写完成从Kafka消费数据，打印控制台上，其中创建SparkSession实例对象时，需要设置参....

一、外部执行过程 以Java语言为例，完成源码后，打包成一个jar文件，把这个文件放到Hadoop集群中(可以放在任何节点，最好放....