一、前提条件 服务器配置好，搭建大数据集群服务器看这篇：搭建学习使用的大数据集群环境：windows使用vmware安装三台虚拟机....
前言 在生产环境中，如果使用一个prometheus的话，随着监控数据的持续增长，将会导致压力越来越大，这时候可以采用prometh....
场景 分组后的数据多行聚合成一行 序号idclasstag11AAf21BBf31CCf41DDf51EEf62QQf72WWf82MMf期望 序号idclass11AA,BB,CC22QQ....
前言 这个系列将从小白视角讲述构建数据仓库过程所需的知识和问题，主要受众是数据中台产品、数据开发、数据分析人员。 ....
1、传统方式获得总条数例如以下： select count(*) from ods.tracklog; 2、通过元数据获取方式如下： 查库 查询不含分....
因为最近在学分布式，而机会所有常见的分布式框架都使用zookeeper作为解决分布式一致性（分布式锁，选举leader）的工具，所....
文章目录 1.UDF2.UDAF3.Mysql数据源4.Hive 1.UDF object Spark03 { def main(args: Array[String]): Unit = { val sp....
在windows本地用 IDEA 测试StructuredStreaming集成kafka的代码时,出现以下异常报错： Exception in thread "stream executi....
本文研究全球市场、主要地区和主要国家人工智能物流无人机的销量、销售收入等，同时也重点分析全球范围内主要厂商（品牌）竞....
我们知道在之前的版本中，可视化图中添加一个参考线以表示一个阈值或者目标（target）使用 Lens 或者使用 aggregation based....
如何提前JSON属性 针对json数组提取 待处理数据 [{"id": "123456789", "orgID": "group", "empName": "张三", "empID": "930....
流量堪称电商直播的“生命线”，对于跨境直播同样如此。流量少，直播间带货能力低，影响销售；流量大，品牌要维护带货口碑，....
当消息多次消费失败后，只将消息放入死信队列其实是不够的，至少也得给个静默处理的结果吧，也就是所谓的降级处理。 引入依....
文章目录 一、数据定义语言（DDL）概述1、SQL中DDL语法的作用2、Hive中DDL语法的使用 二、建表语法三、Hive数据类型1、整体....
论信息系统项目的整体管理 【摘要】 2016 年 7 月，我参加了╳╳市物价局发起的“智慧物价”信息综合管理平台系统的建设....
实现“碳达峰、碳中和”是我国为应对全球气候变化作出的新努力，低碳排放人人有责，利于人们形成绿色简约的新生活方式。由于....
springboot集成RabbitMQ 集成fanout模式 消息提供方的创建 使用一个订单案例来演示消息提供方：一个用户下一个订单，订单信....
异常 1、常见异常 StatementCallback; uncategorized SQLException for SQL [select * from `xxx` where time= &#....
上个月，项目中需要实现上传文件到Hvie数据仓库，一开始使用shell语句上传，在本地是OK的。但是部署到客户环境就报错，所以....
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。 大数据系列文章目录 kafka....
名师互学网 版权所有 (c)2021-2022 ICP备案号：晋ICP备2021003244-6号
