大数据知识_大数据学习笔记

spark+java数据结构 Kryo 序列化框架RDD依赖关系RDD血缘关系RDD 依赖关系RDD 窄依赖RDD 宽依赖RDD 阶段划分任务划分源码 ....

文章目录 Hadoop 配置多队列的公平调度器1 需求2 配置2.1 修改yarn-site.xml，加入以下参数2.1 配置fair-scheduler.xml 3 ....

简单介绍ElasticSearch ElasticSearch是什么 ElasticSearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的....

/* 关系型数据库概论1、-- DQL、DDL、DML、DCLDQL数据查询语言: 用来查询表信息，select、from、whereDDL数据定义....

简单实现数据库的PreparedStatement查询 一、需求分析 查询一个数据库的全部记录，并且将其用java list储存起来 二、代码实....

tdengine作为物联网必备数据库，功能非常强大，当然它也支持一些比较特殊实用的函数。 interval这个函数在tdengine中是用来....

目录 任务一：启动脚本 任务二：关闭脚本 为了提高效率（为了变懒），这里教大家怎么能够省时省力。 任务一：启动脚本 进入....

二、Spark DataFrame基础操作 2.1、DataFrame DataFrame是一种不可变的分布式数据集，这种数据集被组织成指定的列，类似于关....

数据库上机【1】 #创建Employees表CREATE TABLE Employees(EmployeeID CHAr(6)PRIMARY KEY,Ename CHAr(10)NOT NU....

任务一：ZooKeeper的安装 （1）：下载压缩包，版本为zookeeper-3.4.10（与hadoop匹配版本稳定） （2）：解压 （3）：修改配....

实验二：熟悉常用Hbase操作 一、实验目的 理解Hbase在Hadoop体系结构中的角色；熟练使用Hbase操作常用的Shell命令；二、实验....

本文目录如下： 基于Spark、Hive等框架的集群式大数据分析流程详述第1章 数据准备1.1 数据文件准备1.2 数据预处理1.3 启动集....

1.下载 wget https://artifacts.elastic.co/downloads/logstash/logstash-7.7.0.tar.gz 2.解压 tar -zvxf logstash-7.7.0.t....

什么是向量搜索？ 向量检索是基于向量之间的距离对已有documents进行相关性排序，和输入document向量距离越小则认为在某个维....

** 第四章 数据的清洗和加工 ** ** 1，数据清洗 ** 目的：将多余的、错误的数据清洗出去，留下有价值的数据。 1）删除重复项....

常见数据库 MySQL(广泛应用,分免费社区版和企业收费版)Oracle(收费)SQL server(收费)Mongodb(分免费社区版和企业收费版)数据....

1.什么是用户画像 在给用户画像做定义之前，我们先来了解一下什么是推荐系统 场景： 在现在的互联网时代，网上购物已经称为....

mysqldump 是一个命令行客户端程序，用于转储本地或远程 MySQL 用于备份到单个平面文件中的数据库或数据库集合。 如何备....

学习目标： 知道处理异常的目的 掌握捕获异常的相关操作，例如：try…except…else…finally、异常传递 知道使用raise能够....

org.javassist javassist 3.28.0-GA public class Test {public static final Map NEW_FIELD_MAP