大数据知识_大数据学习笔记

Dubbo 是一款微服务开发框架，它提供了【RPC通信】与【服务治理】两大关键能力。 RPC远程调用技术 RPC 全称 Remote Procedur....

项目背景架构 数据源：数据源通过sqoop同步到hbase中。 标签存储：hbase：用于存储标签。mysql：存储标签元数据。es：标签检....

createRemoteEnvironment(host: String, port: Int, jarFiles: String*) 意思是将你本地的代码打的jar包,远程提交到已经存在....

文章目录 一、 下载canal二、安装canal1. 分别解压canal.deployer-1.1.4和canal.adapter-1.1.42. mysql相关配置3. 配置canal....

108.1 演示环境介绍 CDSW版本：1.2或者1.3以上即可 108.2 操作演示 1.启用GPU的限制 加载nvidia.ko模块，创建/dev/nvidiactl....

hive 调优 1.调优概述1、Hive的建表设计层面1.1利用分区表优化1.2 利用分桶表优化1.3 选择合适的文件存储格式1.4 选择合适的....

hive select * from table 出现如上报错 背景 集群为cdp ，hive版本为3.1 集群最开始安装了hive 和tez 没有安装hive o....

1、去ES官网下载ZIP版ES包 我下载的6.3.0，其实这个版本已经很老了    2、创建springBoot项目集成Elasticsearch org.spri....

一、集群搭建要求 1.1 搭建设计 搭建 Pulsar 集群至少需要 3 个组件：ZooKeeper 集群、Bookkeeper 集群和 Broker 集群（Brok....

hive udf 序列化问题 报错 Exception in thread "main" org.apache.hive.com.esotericsoftware.kryo.KryoException: java.la....

文章目录 1. ZK 概述1.1. ZK 数据结构1.2. ZK 特点1.3. ZK 应用场景1.3.1. 统一命名服务1.3.2. 统一配置管理1.3.3. 统一的集....

工作职责: 1、参与低代码开发平台的整体设计与架构梳理； 2、依据公司的总体战略和产品规划，主导BPM平台建设，包括但不限于....

卢佛明(天跃创始人) 卢佛明,男，1984年出生于广东省博罗县人。卢佛明先生拥有上海复旦大学-麻省理工国际MBA和上海交通大学高....

文章目录 1. 数据概述 2. 分析思路 提出问题 提出假设 数据分析 3. 数据预处理 选择子集 ....

大数据技术AI Flink/Spark/Hadoop/数仓，数据分析、面试，源码解读等干货学习资料 109篇原创内容 公众号 1、StarRocks简介 ....

在Windows10上使用kafka3.0时，出现一个文件权限访问异常的错误，查找了一些资料，大概的意思是kafka3.0在window上的支持不....

学习Java大数据需要掌握哪些Java技能？现在大数据发展很速度很多小伙伴想要学习Java大数据技术开发，但是学习大数据为什么需....

> - The JAVA_HOME environment variable is not defined correctly > - This environment variable is needed to run this ....

为了进一步提高医疗资源利用率，减轻人民群众就医负担，保障医疗质量和安全，国家卫生健康委等多个部门联合印发了《医疗机构....