大数据知识_大数据学习笔记

Hive的特点 Hive与SQL语句相像能将SQL语句转变成MapReduce任务来执行Hive要依赖于yarn只能用于结构化Hive只能处理离线数据，....

2021SC@SDUSC 1.DataXceiver OP_READ_METADATA ：读数据块元文件 OP_REPLACE_BLOCK ：替换一个数据块 OP_COPY_BLOCK ....

hive  -- HIVEselect last_day( from_unixtime( unix_timestamp('${bizdate}', '....

原因 在Hive中，GROUP BY 后 SELECT 列的限制，Select 查询的列，要么需要是 Group by 中的列，要么得是用聚合函数（ sum、c....

Hadoop Ha + Hbase + Spark高可用集群搭建 1.前言 记录Hadoop Ha + Hbase+ Spark高可用集群的搭建，主要包括每个组件的配置....

查看行业专题分析报告就上参一江湖，更多专题报告持续更新中。每项专题报告都是从2019开始更新到至今，后续将持续更新... 今....

一.hive 分桶概述 分桶表是对列值取哈希值的方式，将不同数据放到不同文件中存储。 对于 hive 中每一个表、分区都可以进一步....

2021数维杯国际赛A题思路 新冠肺炎背景下的港口资源配置优化策略 2021数维杯国际赛A题思路 新冠肺炎背景下的港口资源配置优....

一、Spring框架开发 SpringBoot——第一个项目 Spring项目——抵御跨站脚本（XSS）攻击 Spring项目——Shiro和JWT技术 Sprin....

数据之于网络时代，犹如石油之于工业时代。大数据即是在互联网时代，信息储存和处理能力飞跃发展之后的一个成果，蕴含着巨大....

elasticSearch介绍与使用_陈海龙的格物之路-CSDN博客首先一起了解elasticSearch，然后结合springData，看看如何使用elasticS....

关注充电桩的朋友经常看到一个叫中电智谷的公司，而且出现的概率还很高。中电智谷是做什么的呢？小编为大家介绍一下。 近来....

场景举例 用户下单，付款，发货，完成，每一个步骤发送完成，发送mq消息到下游系统处理（消费客户端），同一个订单要保证顺....

1.1.1    安装Erlang 1.安装erlang依赖环境： 1)安装GCC GCC-C++ Openssl等模块,安装过就不需要安装了 yum -y install ma....

自己这个报错原因： 在环境变量path设置中，%HADOOP_HOME%sbin和%HADOOP_HOME%in放在了一行，"%HADOOP_HOME%sbin;%HADOOP_HO....

文章末尾有rabbitmq在spring项目内如何集成 安装rabbitmq前需要先安装erlang环境 传送门：erlang安装教程 可以去github上下....

文章目录 前言一、工具安装；二、操作步骤；1、配置python环境变量；2、安装Canmatrix工具；3、安装python功能插件；4、使....

title: 数据湖基础知识以及Mac安装Iceberg教程 date: 2021-10-20 19:47:14 tags: data LakeIceberg 计算机科学领域的任何问....

百度硬盘：链接：https://pan.baidu.com/s/1WIPguLQdiQ_JL-U0M4yWfg提取码：yyds觉得有用的给我点个赞，画了2天。

1、ElasticSearch 是什么？ Elasticsearch 是一个分布式、高扩展、高实时的搜索与数据分析引擎。 Elasticsearch 的实现原理....