大数据知识_大数据学习笔记

2021SC@SDUSC

使用sqoop从MySQL导入数据到hdfs 1、代码解析： bin/sqoop import --connect jdbc:mysql://hadoop102:3306/ 【此处为换行符....

1.单个mq搭建 一、安装Erlang环境 1、 在安装erlang之前先安装下依赖文件(这一步不要忘掉了， 不然后面./configure的时候要....

项目上有一张Hive分区表，分区数非常多，大约有2000+个分区，然后需要增加一个字段，然后华丽丽的发现，执行了半小时之后，....

下载源码：https://github.com/apache/rocketmq/archive/refs/tags/rocketmq-all-4.9.1.zip 解压： 根目录创建conf目录，复....

一、Hive介绍 什么是hive hive是一个构建在hadoop上的数据仓库框架，是应facebook每天产生的海量新兴社会网络数据进行管理和....

一.数据仓库概述 英文名称:Data Warehouse面向分析的存储系统数据仓库和数据库的对比 两者联系 两者都是存储数据的,都....

Spark官网提供的编译版本默认是不支持Hive的，今天就给大家介绍采用源码编译方法得到支持Hive的Spark版本 一、配置maven mav....

Mysql 1.安装 基本操作 # 建库create database [database name] charset=utf8 ; (djangomall# 新建用户create user [user....

LINQ = Language Integrated Query（集成查询语言） Linq是微软在.NET Framework 3.5中信增加的一个特性。它是用来查询数据....

背景：数字政府时代下的新模式 如今，在大数据等技术支撑下，政府在日常办公、信息收集与发布、公共管理等事务中都是在数字....

表环境（TableEnvironment）是 flink 中集成 Table API & SQL 的核心概念。它负责: ① 注册 catalog ② 在内部 catalog 中注....

一、组件部署架构 tunabook102：NameNode、ResourceManager、ZooKeeper、ZKFCtunabook103：NameNode、ZKFC、ZooKeepertunabo....

maven依赖 org.springframework.bootspring-boot-starter-data-elasticsearch 配置文件 spring: data: elasticse....

前提 好久没写博客了，距离上次博客过去好几年了，博客编写的改版也变动了好多都认不出来了。。。之前好多工作中的笔记都记....

与Zookeeper连接丢失,Unknown status, Cannot allocate block number in ZooKeeper: , ZooKeeper session has been expired....

如下配置显示报错： //少个- org.apache.spark spark-sql_2.11 2.4.5 provided 换成： org.apache.spark spark-sql_2.11 ....

//注册表 oldTableEnv .connect(new FileSystem().path(“src/main/resources/sensor.txt”)) .withFormat(new OldCsv()) .w....

1、技术一面 Q1：自我介绍 Q2：讲讲你的三段实习经历都做了啥 Q3：讲讲你印象最深刻的一次实习经历 不同场景下，伴随系统需....

Hive添加列、修改列（调整位置）、删除列操作等 张行之 2020-09-11 18:35:51 5433 收藏 18 分类专栏： 大数据 文章标签： 数....