大数据知识_大数据学习笔记

目录 前言大学生活迷茫的1-6月与CSDN的6-12月准备好了找工作经历求职总结⭐交流学习 前言 Hello大家好，我....

kafka消费者 消费步骤消息订阅序列化方式 拉取消息offset提交重复消费问题 控制和关闭消费者指定位移消费线程不安全消费者....

CentOS7安装java环境 一.下载jdk8的压缩包传到linux上二、解压三、配置jdk环境变量四、测试是否安装成功 一.下载jdk8的压缩....

HDFS性能测试 一、写数据性能测试二、读数据性能测试三、清除数据 Hadoop集群提供一套测试读写HDFS的jar包，jar包在$HADOOP_....

elasticsearch安装（V7.10.0） 踩坑笔记 一、elasticsearch在6.X版本后不允许使用root账户启动 创建其他账户 adduser es 创....

作为一个程序员，我们深知水平的深浅决定你的收入高低，月工资下到五六千，上到十几万都是很正常的事情。许多人的现状是平时....

首先解释以下为什么会出现这篇文章：前几天突然在网上看到了“工业互联网”相关的信息，然后之后呢还比较感兴趣就深入的了解....

文章目录 前言一、安装Spark1. 下载压缩包并解压2. 安装Spark3. 配置环境变量4. 修改配置文件 二、验证Spark安装及错误处理....

DataX datax DataX3.0概览 DataX 是一个异构数据源离线同步工具，致力于实现包括关系型数据库(MySQL、Oracle等)、HDFS、Hive....

目录 regionMETA表MemStorestoreHFileHBase写文件流程读流程 region 当Region服务器收到写请求的时候，Region服务器会将请求....

hive编译 自从CDH宣布收费之后，公司决定使用开源的组件，对现有的大数据集群进行替换。 使用hive3.1.2和spark3.0.0配置hive....

从github上找到console工程并进行编译，之后便可以使用控制台查询 注意: 自己配置的端口，记得配置并关闭防火墙 测试: pr....

我是廖志伟，一名Java开发工程师、Java领域优质创作者、CSDN博客专家、幕后大佬社区创始人。拥有多年一....

其实今年的年度总结一开始没想到要说什么，偶然看了一眼去年的总结。瞬间感觉有话可以聊了。那大概总结以下几个内容： 1.....

2021年12月11-12日，第五届 S-CIO 2021华南CIO大会暨信息技术交易会在广州·越秀国际会议中心举行。 邀请了近1000位来自广....

参考：MAC下搭建Hadoop运行环境_白程序员的自习室-CSDN博客_hadoop mac 的博客，在我的Mac上搭建Hadoop，启动时遇到namenode....

前言 本文隶属于专栏《1000个问题搞定大数据技术体系》，该专栏为笔者原创，引用请注明来源，不足和错误之处请在评论区帮忙....

随着数字经济的快速发展，云计算、物联网、人工智能等新一代信息技术日臻成熟并以各种形式被应用到社会经济生活的各个方面，....

简介 npm（node package manager）：nodejs的包管理器，用于node插件管理（包括安装、卸载、管理依赖等）. 本文主要讲解如....

Apache Hadoop -分布式处理框架。集成了MapReduce(并行计算)、YARN(作业调度)和HDFS(分布式文件系统)。 1. 前期准备 1.准备....