
一、前期准备 1、三台虚拟机 2、spark安装包,我的版本spark-3.1.2-bin-hadoop3.2 3、scala环境,我的版本scala-2.11.8 4、j....
设置主机名 [root@es1 ~]# hostnamectl set-hostname es1.example.local 主机名 [root@es1 ~]# hostnamees1.example.local ....
面试公司:字节跳动 面试岗位:大数据开发 一面题: • 自我介绍数仓维度建模 • 深挖事实表维度表构建spark join • mapred....
2021SC@SDUSC 目录 一、RPC简介二、HBase中RPC概况Server端RPC实现Client端RPC实现 一、RPC简介 作为一个分布式系统,HBas....
代码运行需先安装环境依赖 windows环境下: 先安装Erlang页面:https://www.erlang.org/downloads下载链接:https://erlang.org....
1.空间占用测试 mysql> select length(NULL), length(''), length('NULL');+--------------+---------....
文章目录 一、Hive 概述二、Hive 数据类型和文件格式2.1 数据类型2.1.1 基本数据类型2.1.2 数据类型隐式转化2.1.3 集合数据....
Neo4j下载 Neo4j下载 Enterprise Server 企业版Community Server 社区版Neo4j Desktop 桌面版 Neo4j安装(版本为3.5.28) ....
文章目录 概述先行概念leader工作流程涉及的代码角色PrepRequestProcessorProposalRequestProcessorCommitSyncAckFinal通知f....
hive学习之分区表与分桶表 重点掌握分区表 分区表 分区表实际上就是对应一个HDFS文件系统上的独立的文件夹,该文件夹下....
每个交易者实际上都有自己的选股策略,这是必然的,也会有自己的主观干预,但是还是需要从客观热点股票进行一个比对的,才能....
今年,为实现粤港澳大湾区与珠三角城际铁路的互联互通,广州、珠海、佛山、东莞、中山、江门、肇庆7市市长齐聚广州,共同研....
目录 文章目录 目录AWS 上的 DevOps AWS 上的 DevOps 在 AWS 上部署 5G 网络的好处之一是,用户可以根据需要,使用一系列的....
文章目录 MySQL 的内连接、左连接、右连接有什么区别? Hash算法索引的基本原理百万级别或以上的数据如何删除数据库为什么....
hive学习之函数 系统内置函数 查看系统自带的函数 show functions; 查看内置函数的用法 desc function 函数名;desc function....
mapreduce.framework.nameyarnyarn.app.mapreduce.am.envHADOOP_MAPRED_HOME=/usr/local/hadoopmapreduce.map.envHADOOP_MAPRED_
kubectl create 错误 minikube start 后使用 k create -f *.yaml 遇到错误 Error from server (InternalError): an error on....
Flink on Hive构建流批一体数仓 基于 Flink1.12 一、Flink写入Hive表 Flink支持以批处理(Batch)和流处理(Streaming)的方....
概述 本文目的在于将消息消费的流程梳理完毕,使自己包括读者能够对 RocketMQ 的消息消费流程有清晰的认识。 主要包含以下内....