大数据知识_大数据学习笔记

安装准备（准备jdk8，elasticsearch-7.15.0安装包） 资源传送门：安装包下载安装jdk（上传jdk包到服务器：/opt） > tar -xvf....

Docker部署hadoop集群 一、Docker基本介绍 1、Docker 是一个开源的应用容器引擎，是一个轻量级容器技术。其中，容器是一种通....

目录 窗口  固定窗口 滑动窗口 会话窗口 窗口 窗口就是将一个数据源(无论是无界的还是有界的)分割成有限的块进行处理的....

HBase安装配置 获取安装包 首先需要去hbase官网查看一下hbase版本和hadoop版本要匹配，否则很多业务受影响。 综上选择使....

目录 1 RDD基础2 创建RDD3 RDD操作3.1 转化操作3.2 行动操作3.3 惰性求值3.4 向spark传递函数3.5 常见的转化操作3.6 常见的....

文章目录 前言 准备工作 Adapter（redis）开发 部署Linux 总结 前言 众所周知，通过 Canal 可以取到 MySQL Master....

建表相关： 1、创建数据库字符集选择utf8mb4，排序集选择utf8mb4_general_ci；建表、建索引、加字段等操作不用指定字符集，....

文|智能相对论 作者|叶远风 一辆大货车在高速行驶途中突然冲过中央隔离防护栏，进入车流密集且高速的对向车道，以很高的相对....

es的近实时搜索其实底层是通过lucene的近实时搜索实现的， 1.对于lucene来说，有两个主要的类： IndexWriter类和IndexReader....

前言 何为发布确认？ 字面意思：P发送消息之后，能够确定C收到消息了 问题 P发送消息要通过交换机和队列，所以只需要确保这....

rabbitmq # 1.简单队列 2.工作队列模式 3.发布订阅模式 4.路由模式 5.主题模式

RocketMQ底层详解 架构 Broker RocketMQ的服务，或者说是一个进程叫做Broker，作用是存储和转发消息。RocketMQ单机大约能承....

Apache APISIX 社区达成新的里程碑，与 Apache APISIX 相关的项目全球贡献者突破 300 位！距离 Apache APISIX 主库达到 200 ....

2021SC@SDUSC 本次我将对hadoop中的common部分中Configuration第二部分内容进行解析： private static AtomicReference de....

避坑指南 1⃣️版本兼容问题 由于Hadoop生态是开源的，所以难免会出现版本兼容问题。为了保证Hadoop、spark、jdk、python之....

DB 存储数据的“仓库”，保存了一系列有组织的数据。 DBMS 数据库管理系统 SQL 结构化查询语言 优点： 不是某个特定数据库供....

后台框架koa2使用mysql2模块操作数据库下图可以看见，我想实现分页功能，没有采用?offset=0&size=20这种常见的方式，而是使....

1.hadoop fs/dfs hdfs/dfs hadoop：适用面最广，可以操作任何文件系统。 hdfs：只与HDFS文件系统相关。 fs：涉及到一个通用....

参考：2021最新版RabbitMQ详解，从基础入门到高级内容-消息中间件_哔哩哔哩_bilibili 课程学习笔记 一、RabbitMQ 介绍    ....

目录 1 HBASE介绍2HBASE和Hdfs的区别3 Redis，传统数据库，HBase，Hive4 HBASE的架构5 常用HBASE shell6 HBASE表数据模型7 H....