大数据知识_大数据学习笔记

11月5日，由上海控安主办的工业科技生态创新论坛第一期顺利举办。本次论坛主题为“携硬核科技 创工业生态”，旨在加快构建工....

数据流图

zookeeper 高可用集群搭建 - 公众号_张少林同学 - 博客园 构建高可用ZooKeeper集群 - cyfonly - 博客园

实验中遇到的问题 实验过程中hive打不开java.lang.NoSuchMethodError:com.google.common.base.Preconditions.checkArgument ....

Hive列转行 (Lateral View + explode)详解

问题描述 我希望清空一个hive表中的数据,然后报错 Cannot truncate non-managed table 问题分析 由其中的关键字可以看出**该....

中国石墨烯产业发展布局与投资可行性研究报告2021年版 HS--HS--HS--HS--HS--HS--HS--HS--HS--HS--HS--HS-- 【修订日期】：20....

Beeline 要与 HiveServer2 配合使用 HiveServer2（HS2）是一种使客户端能够对 Hive 执行查询的服务。HiveServer2 是 已被废....

初学大数据开发，制定学习路线：   1 java 2 linux 3 hadoop 4 hive 5 avro and protobuf 6 zookeeper 7 hbase 8 phoenix 9....

背景： 为了适配flinkSQL连接clickhouse，修改flink-connector-jdbc_2.11-1.12.4.jar 添加clickhouse的信息。 因为有依赖关....

Hadoop集群各类参数配置详解 1. 参数配置说明 core-site.xml参数配置详情 官方文档：http://hadoop.apache.org/docs/curre....

SQL例如以下会报错： select sum(time) as time, roadCoding, upstreamOrDownstream from historicalroaddata wher
....

一、elasticsearch 安装 1.创建普通用户 useradd elk 2.将elasticsearch 解压到/usr./local tar -xvf elasticsearch-5.3.0.t....

解决问题：从gp->kafka,数据集获取，发送kafka的数据变换 val sourceDF = Range(0, 10) .map(index => { val dbtable = ....

数据处理总流程 MapReduce计算框架体现的是一个分治的思想。及将待处理的数据分片在每个数据分片上并行运行相同逻辑的map()....

Hot-warm-cold architecture with Elasticsearchhttps://ptran32.github.io/2020-08-08-hot-warm-cold-elasticsearch/ Implemen

在中国经济“双循环”新发展格局下，数字经济发展将成为经济社会全面发展的强大牵引力，成为经济高质量发展的助推力。数字经....

文章目录 报错信息大概意思： 报错信息 The program finished with the following exception:org.apache.flink.client.pro....

怎么知道哪个才是leader partition，只需要获取到元数据不就好了嘛。 说来要怎么获取元数据也不难，只要随便找到集群下某一....

万物互联时代，企业通讯方式发生了翻天覆地的变化。基于云计算架构的云通讯解决方案可有效降低企业的通讯成本、提高办公协作....