大数据知识_大数据学习笔记

Hive将yyyyMMdd变成yyyy-MM-dd: select to_date(from_unixtime(UNIX_TIMESTAMP('20210101','yyyyMMdd&#....

ERROR TaskSchedulerImpl: Ignoring update with state FINISHED ERROR TaskSchedulerImpl: Ignoring update with state FINISHE

销售业绩提升33% 库存准确率高达99% 90%以上订单可以实现当天交付 订单从接单到发货30分钟内即可完成 ... ... 是什么，让一....

1. 什么是SpringCloudStream →官网 , 官网doc , Spring Cloud Stream中文指导手册 Spring Cloud Stream是一个构建事件消息....

脚本文件路径: /home/[用户名]/[项目文件]/[启动文件] /home/bin/gdzyz/main.py 创建启动脚本(.sh结尾):vim /home/[用户名]/....

1. 计算季度的天数 select trunc(ref_date,'Q') q_date -- 季度第一天,max(ref_date) max_date -- 季度最....

1.sparkStreaming 流式处理框架，是Spark API的扩展，RDD最终封装到DStream中 2.第一个wordcount pom依赖 org.apache.sp....

1)安装步骤 (1)首先确保JDK1.8安装完成 (2)下载对应的Scala安装文件scala-2.12.11.zip (3)解压scala-2.12.11.zip ，我这里解....

使用sample抽样获取数据倾斜的key object SparkDataSkew { def main(args: Array[String]): Unit = { val sparkConf: Sp....

#启动端口配置server: port: 8088# 数据源配置 spring: application: name: SpringbootApplication datasource:

现货黄金交易在欧美投资市场上盛行多年，它是一种高杠杆、电子化的黄金交易方式，参与其中的投资者既可以买涨也可以买跌，在....

跨境电商正如烈火燎原之势迅猛发展着，“一带一路”的发展战略正在影响着各个经济圈，通过互联网连接生产商与消费者的跨境电....

Elsaticsearch7.15安装搭建 前言： 为方便针对日志进行管理，以及对日志进行分析，需要搭建ELK集群，最终目的是为了搭建el....

ADAMoracle广域节点机制开创预言机新时代ADAM激励。 现有主流去中心金融服务平台对预言机有较强的依赖，这些去中心化金融服....

Skywalking应用 3.1 agent下载3.2 agent应用3.2.1 应用名配置3.2.2 IDEA集成使用agent3.3.3 生产环境使用agent 3.3 Rocketb....

文章目录 一、聚类分析 （一）概念介绍 （二）常用聚类分析算法 二、系统聚类（层次聚类） （一....

1: jdk  环境安装 下载jdk8 免费版本：Java Archive | Oraclehttps://www.oracle.com/java/technologies/downloads/archiv....

定义： 定义、规划、开发、执行安全策略和规程，以提供对数据和信息资产的适当验证、授权、访问、审计。 目标： 启用对企业....

Delta Lake 事务日志实践 读者交流群已经开通了，有需要的可以私信进入读者交流群 前面我们介绍了Delta Lake 事务日志,具....

1.1.1:为什么学习scala 1)Spark是新一代内存级大数据计算框架，是大数据的重要内容 2)Spark就是Scala编写的，所以要先学习Sc....