大数据知识_大数据学习笔记

1.什么是Kafka？Kafka诞生的背景是什么？ Kafka是由Apache软件基金会开发的一个开源流平台，由Scala和Java编写。Kafka的Apac....

这个项目涉及到Shiro整合JWT、秒杀功能所具备的基本要求(限流、乐观锁、接口隐藏、JMeter高并发测试等等)、消息中间件Rabbit....

目录 1 数据抽取2 数据转换3 数据加载 1 数据抽取 ETL（Extract-Transform-Load）是将数据从来源端经过抽取（extract）、转....

文章目录 前言：1 zookeeper概述1.1 作用1.2 特点1.3 数据结构1.4 应用场景 2 zookeeper安装2.1 本地模式安装与配置2.2 集....

1、完成vue下表格的编辑并上传到数据库中  2、前端数据展示功能

报错信息： 在hadoop集群搭建中，JDK安装部分出现的错误 报错原因： Centos官方已宣布停止对Centos6的维护更新，并下架了Ce....

目录 一、KingbaseES数据库简介： 数据库包括两层概念： 数据库管理系统： 关系型数据库： 二、KingbaseES总体结构： 逻辑功....

创建一个dataframe： df = spark.createDataFrame([("a", 1), ("b", 2), ("c", 3)], ["Col1","a"]) df.select(df.colRegex(....

本文将介绍唇语识别领域使用最多的几个数据集。 一、本文将详细的介绍数据集的格式以及处理方法，欢迎在评论区或私信讨论，....

实验目的 1、理解HDFS在Hadoop体系结构中的角色 2、熟悉使用HDFS操作常用的Shell命令 3、熟悉HDFS操作常用的Java API 实验平....

简介 利用dubbo和zookeeper实现简单的分布式程序此分享仅仅是简单入门分享分为两部分： 1.环境搭建（dubbo-admin可视化，zoo....

安装Hbase 需要先安装hadoop集群，zookeeper集群 解压缩hbase~~.tar.gz tar -zxvf hbase-2.2.6-bin.tar.gz -C /etc/hadoop/ ....

数据集介绍 是一家lending club金融借贷公司的一些数据 存储的是用户小额贷款以及还款的一些信息，数据列很多，大概887379行....

这里写目录标题 ik分词器什么是IK分词器 ?安装ik分词器增加自己的配置！ 参考目录 ik分词器 什么是IK分词器 ?      ....

今天ES执行时，报这个错误： org.elasticsearch.client.Request.(Ljava/lang/String;Ljava/lang/String;)V Maven：  

数据安全背景 **本人博客网站 **IT小神 www.itxiaoshen.com ** **数据化转型过程中数据治理和低代码平台开发都在各自赛道中....

文章目录 迁移之前需要先考虑的事：迁移方案：迁移工具distCp概述：原理使用方法： Map数目不同HDFS版本间的拷贝Map/Reduc....

上回书说到，这两天突然闲着没事，想自己做一个数据库。         上次是已经把登录系统做完了（见代码）： import json#....

0、安装前环境准备 ① 本篇是基于Linux操作系统中的安装，本文中所有的操作基于CentOS8进行安装演示。这一次的搭建演示，会....

系列文章 全国大学生大数据技能竞赛（数仓部署） 全国大学生大数据技能竞赛（Spark on Yarn安装） 文章目录 系列文章前言资....