前沿技术知识_前沿技术学习笔记

本文从普通用户的角度讲述 Hive 统计信息，源代码角度请参考。 统计信息的分类 有两种统计信息，第1种为表和分区的统计信息....

1. 设置zookeeper开机启动 kafka_2.13-3.0.0自带的zookeeper，这里我们先创建zookeeper启动脚本： [root@node03~]# mkdir /....

一、Spark集群拓扑 （一）集群拓扑 （二）集群角色分配 Spark Standalone模式的集群搭建需要在集群的每个节点都安装Spark....

作者简介 袁振，SUSE Rancher 技术支持经理，负责订阅客户售后技术支持团队，为订阅客户提供技术支持服务。2016 年开始接触....

Hive本质 Hive的本质其实就是 Hdfs+MapReduce，HDFS存储、MR执行任务 发生数据倾斜的原因 1.数据本身倾斜 内容倾斜、group b....

1、Hive建表 CREATE TABLE `rcdn_ads.ads_rcdn_zc_xq`( `qybm` varchar(25) COMMENT '区域编码', `csbm` ....

今天分享，10条用脑浆和血液写下的交易军规。 我在商品、股市爬摸滚打十几二十年，从来没有想到过，会出一个这样的课程。 早....

2022 年 3 月 5 日，首次 IDP Meetup 成功举办。此次 IDP Meetup 以“AI 开发生产平台及其共荣生态”为主题，6 位业界顶级大....

文章目录 前言一、os库介绍二、主要功能三、系统相关变量和操作1、os.name3、os.environ4、os.sep5、os.linesep6、os.getcwd....

目录 一、Hive简介二、 Hive环境安装1. 准备工作1）安装Hadoop2）安装MariaDB（1）查看MariaDB安装情况（2）卸载MariaDB/MyS....

项目场景： 在使用docker部署Clickhouse集群时，遇到的各种坑 问题一 ``执行select * from system.clusters;查看集群信....

Hadoop 三、Hadoop MapReduce与Hadoop YARN 1. Hadoop MapReduce 1.1 理解MapReduce思想 MapReduce的思想核心是“先分再合，....

import java.sql.{Connection, DriverManager, PreparedStatement, SQLException}import com.alibaba.fastjson.JSONimport org.a

一、zookeeper集群的特点 zookeeper集群中有三种角色，一个领导者 leader，多个跟随者 follower，还有observer观察者（跟fol....

设置CentOS属性 1.登录Linux操作系统 备注：使用root用户登录，Log in界面输入密码时不会显示密码  2.配置主机名称为“nod....

zookeeper是一种c/s架构设计的一种应用于分布式服务的一种协调的中间框架，能够实现服务的统一配置管理，统一命名服务，分布....

一、 在Vmware安装CentOS 7 1.选择自定义选项 2.兼容性的含义是你所创建此虚拟机适用于什么版本的Vmware，此处不宜选择太高....

Flink的旁路输出特性可以用来对数据进行分流，通过是通过创建一个流的标签（OutputTag），再利用这个OutputTag标签对象作为....

目录 一、canal 简介 二、canal安装 1. 下载canal-deployer  1.修改canal-deployer 配置文件  2. canal-adapter配置及使....

Docker配置 1. Docker服务自启动 （1）使用systemctl start docker启动docker服务 （2）使用systemctl status docker 查看....