大数据系统知识_大数据系统学习笔记

作者简介 袁振，SUSE Rancher 技术支持经理，负责订阅客户售后技术支持团队，为订阅客户提供技术支持服务。2016 年开始接触....

Hive本质 Hive的本质其实就是 Hdfs+MapReduce，HDFS存储、MR执行任务 发生数据倾斜的原因 1.数据本身倾斜 内容倾斜、group b....

1、Hive建表 CREATE TABLE `rcdn_ads.ads_rcdn_zc_xq`( `qybm` varchar(25) COMMENT '区域编码', `csbm` ....

今天分享，10条用脑浆和血液写下的交易军规。 我在商品、股市爬摸滚打十几二十年，从来没有想到过，会出一个这样的课程。 早....

2022 年 3 月 5 日，首次 IDP Meetup 成功举办。此次 IDP Meetup 以“AI 开发生产平台及其共荣生态”为主题，6 位业界顶级大....

文章目录 前言一、os库介绍二、主要功能三、系统相关变量和操作1、os.name3、os.environ4、os.sep5、os.linesep6、os.getcwd....

目录 一、Hive简介二、 Hive环境安装1. 准备工作1）安装Hadoop2）安装MariaDB（1）查看MariaDB安装情况（2）卸载MariaDB/MyS....

项目场景： 在使用docker部署Clickhouse集群时，遇到的各种坑 问题一 ``执行select * from system.clusters;查看集群信....

Hadoop 三、Hadoop MapReduce与Hadoop YARN 1. Hadoop MapReduce 1.1 理解MapReduce思想 MapReduce的思想核心是“先分再合，....

import java.sql.{Connection, DriverManager, PreparedStatement, SQLException}import com.alibaba.fastjson.JSONimport org.a

一、zookeeper集群的特点 zookeeper集群中有三种角色，一个领导者 leader，多个跟随者 follower，还有observer观察者（跟fol....

设置CentOS属性 1.登录Linux操作系统 备注：使用root用户登录，Log in界面输入密码时不会显示密码  2.配置主机名称为“nod....

zookeeper是一种c/s架构设计的一种应用于分布式服务的一种协调的中间框架，能够实现服务的统一配置管理，统一命名服务，分布....

一、 在Vmware安装CentOS 7 1.选择自定义选项 2.兼容性的含义是你所创建此虚拟机适用于什么版本的Vmware，此处不宜选择太高....

Flink的旁路输出特性可以用来对数据进行分流，通过是通过创建一个流的标签（OutputTag），再利用这个OutputTag标签对象作为....

目录 一、canal 简介 二、canal安装 1. 下载canal-deployer  1.修改canal-deployer 配置文件  2. canal-adapter配置及使....

Docker配置 1. Docker服务自启动 （1）使用systemctl start docker启动docker服务 （2）使用systemctl status docker 查看....

1.MySql创建表： CREATE TABLE `student` ( `id` int(10) NOT NULL, `name` varchar(128) CHARACTER SET latin1 COL....

BI ORACLE PLSQL 》》金融银行大数据报表开发 --存储过程： / * 对给定部门t作为翰入参数)的员工进行加薪操作，若其到....

文章目录 配置历史服务器配置日志的聚集集群启动/停止方式总结编写Hadoop集群常用脚本hadoop版本常用对比 前言：接上一....