大数据知识_大数据学习笔记

如何搭建MQTT服务器，请参见基于RabbitMQ的MQTT插件搭建MQTT服务，使用MQTTX进行收发测试 mqtt client jar 目前实现mqtt协议....

首先确定指令中的文件路径，要加 “/" ,要用绝对路径。 把hadoop fs -ls file  改为Hadoop fs -ls /file 试试 如果仍然不行....

数据可视化通过大屏幕，动态的展示等方法将冰冷的数据重新鲜活的展现在大家面前，近些年来受展会，统计，汇报等等场景的青睐....

如果提示没有wget命令 yum install -y wget 以下载3.4.10为例 wget -c https://archive.apache.org/dist/zookeeper/zookee....

文章目录 Spark AE 提交 ShuffleQueryStageExec 执行，并返回Futrue对象DagScheduler 收集 Map 执行结果，等待 MapStage执行....

锚节点 锚节点是定义在一个已经加入到通道的组织的节点。该节点主要用于节点的发现。 在一个通道中，锚节点可以被这个通道的....

一、CDH概念 CDH，全称Cloudera's Distribution, including Apache Hadoop。由美国的Cloudera公司推出的大数据产品；CD....

文章目录 一、字符函数二、数学函数三、日期函数四、其他函数五、流程控制函数 一、字符函数 1、大小写控制函数 ①UPPER(....

问答： 查看库，创建指定库 Show databases； 查看指定库 show create database yun47; 查看当前库支持字符集、校验集、引....

第一步：下载安装erlang 原因：RabbitMQ服务端代码是使用并发式语言Erlang编写的，安装Rabbit MQ的前提是安装Erlang。 下....

在项目中操作数据库的三大步骤： 安装操作 MySQL 数据库的第三方模块（mysql） 通过 mysql 模块连接到 MySQL 数据库 通过....

什么是数据库？什么是数据库管理系统？什么是SQL？他们之间的关系是什么？ 数据库： 英文单词DataBase，简称DB。按照一....

文章目录 为什么用怎么用初始化类 class pyspark.sql.SparkSession 类函数说明利用DataFrame API查询利用sql查询DataFrame函....

分布式流处理模型 抄的网图，下图就是典型的flink 分布式流处理模型 主要将数据分为三部分，输入，处理，输出三部分。 flin....

文章目录 环境使用的函数接口流程人脸检测部分图片读取/尺寸修改图片矩形标注人脸检测读取视频标注人脸 人脸识别人脸信息录....

一、使用Xshell连接虚拟机 新建会话 设置主机 设置用户账号密码 连接虚拟机 连接成功 二、使用Notepad++连接虚拟机修改配置....

flink 1.12.1 flink-cdc 1.2.0 mysql 7+ 最近使用公司的大数据平台做实时ETL，发现平台提供的实时消费binlog到kafka的服务....

背景 当笔者执行jmap -histo:hive命令时，发现JVM执行了一次FullGC。 出于好奇，我们来做个实验，确认这种情况是偶然还是必....

JDBC 的使用 实验结果1、数据查询2、数据插入3、数据修改4、数据删除 源代码Main类，程序开始于执行Main类的main方法按参....

基于恒玄平台开发TWS耳机，常用的有BES2300系列，BES2500系列，以及即将开发的BES2600，其实都差不多。本笔记基于恒玄BES250....