大数据系统知识_大数据系统学习笔记

你是否有过这样的经历：你和朋友聊天表达你近期想要购买某件商品，第二天当你打开某购物软件时，平台向你推送的商品正是你想....

Elasticsearch项目实战 前言 之前项目中有使用到ES技术栈，一直没有来的急分享，今天就好好做一个技术沉淀 Elasticsearch安....

17.partitionBy 将数据按照指定 Partitioner 分区规则重新进行分区。Spark 默认的分区器是 HashPartitioner 方法由pairRDDFu....

Linux阿里云/腾讯云/百度云服务器安装部署ElasticSearch 一、安装JDK环境 Linux安装JDK环境不会的参考我写的这篇文章： http....

一句话描述kafka kafka是一种分布式消息引擎系统，主要功能是提供一套完整的消息发布和订阅的方案 术语 Topic ：发布订阅的....

我有一个带有MapReduce的Maven Java程序，该程序运行得很好，但如今，我收到如下问题： Exception in thread "main" java.io....

工业互联网（Industrial Internet）是新一代信息通信技术与工业经济深度融合的新型基础设施、应用模式和工业生态，通过对人....

大数据之Scala 隐式转换 完整使用 一、隐式转换1、隐式函数1）说明2）案例实操 1、隐式类1）案例实操3、隐式参数 一、隐....

文章目录 一、DataX1、DataX框架2、DataX运行原理 二、安装DataX1、DataX的下载安装地址2、编译 三、配置模板1、从Stream....

由于elasticSearch版本更新频繁，此笔记适用ES版本为 7.10.2 此笔记摘录自《Elasticsearch搜索引擎构建入门与实战》第一版 e....

基于Spring Cloud Alibaba 分布式微服务高并发数据平台化(中台)思想+多租户saas设计的企业开发架构，支持源码二次开发、支持....

摘要：视频正在成为一种新的生产力，视频云就是提高这一生产力的重要生产工具。 我们已经进入了一个超视频时代。 根据中....

什么是NFT NFT是非同质化通证（Non-Fungible Token）的缩写。区别于比特币、以太坊等可相互替代的、具有统一性、几乎可无穷....

HIVE 多表关联的顺序 多表关联顺序的问题多表关联的顺序 多表关联顺序的问题 当多张表进行关联的时候，既有 LEFT JOIN，又....

文章目录 数据模型存储层架构设计注册数据锁原理图源码分析一StorageModuleElasticsearchProvider索引创建ModelInstaller.in....

数据治理是组织中涉及数据使用的一整套管理行为，最终目标是提升数据的价值。 随着数字化转型进程的推进，数据驱动业务变革....

在《深入理解Java类加载机制，再也不用死记硬背了》里我提到了对于一门语言的“会”的三个层次。本篇将以知识地图的形式展现....

elastic-job的使用 elastic-job官网说明demo 演示引入maven配置添加spring.xml配置文件初始化注册任务的bean启动项处加入sri....

前阵子想学习一下数据仓库相关内容，发现要学习hive软件，然后最近这几天终于把配置的东西整得差不多明白了。 首先，hive是....

分布式文件存储系统MinIO 目录1.分布式文件系统应用场景1.1 Minio介绍Minio优点 1.2 MinIO的基础概念1.3 纠删码EC（Erasu....