大数据系统知识_大数据系统学习笔记

一、鲆鱼养殖产量 鲆鱼为硬骨鱼纲，鲆科，是比目鱼的一类。体侧扁，不对称，两眼都在左侧。口前位，下颌有突出。前鳃盖骨边....

进入hbase shell命令 ./hbase shell 1、status 查看hbase运行状态 2、version 查看hbase版本 3、list 列出hbase所有的 表 4....

Mac 启动nacos 进入bin目录 单机启动命令 sh startup.sh -m standalone Mac 安装并启动redis 安装 brew install redis 启动 ....

1、在线安装依赖环境 yum install build-essential openssl openssl-devel unixODBC unixODBC-devel make gcc gcc-c++ kerne....

目录 一、上传工具 二、安装jdk 三、配置主机名与ip地址的映射关系 四、关闭防火墙  五、设置免密登录 六 、安装hadoop ....

yarn：资源调度和任务管理 a、四大组件：（四个进程） ResourceManager（Rm）：主进程 Nodemanager（NM）：各个机器节点管理....

一、准备工作 1、下载证书制作工具 创建一个目录 用来存放证书工具 使用命令进行下载 [root@hadoop openvpn]# wget -P http....

概念 广播意思就是将变量发送到每一个并行运行的task所在的机器上,这样可以避免数据在涉及到聚合之时的跨网传输,提高流运行....

报错如下： java.net.ConnectException: Call From V_LZ/192.168.53.1 to hadoop2:8020 failed on connection exception: ja....

目录 Elasticsearch官方文档：Elasticsearch Guide [8.1] | Elastic 步骤如下： 阅读本文的前提要求： 1. 了解docker 、doc....

概要 git 地址 -- GitHub - segmentio/kafka-go: Kafka library in Go Dialer类型的主要作用是创建与kafka集群的连接。通过....

Apache Lucene(开源高性能全文检索工具包) apache Nutch(开源web搜索引擎) Google的三大论文（GFEMapReduceBigTable） Apach....

--使用云服务器进行单节点服务器搭建 （1） 在root用户下修改主机名 [root]# vim /etc/hostname 按 i 进入编辑 设置主机名....

目录 go语言操作es解决golang使用elastic连接elasticsearch时自动转换连接地址初始化数据创建结构体方式字符串方式： 查....

相关算子整理 1.Action2.Transformation3.key-valueRDD的操作4.缓存操作5. 共享变量 from pyspark import SparkConf,SparkC....

在Centos 使用anaconda中的jupyter notebook连接Spark时报错py4j.protocol.Py4JError: org.apache.spark.api.python.PythonU....

文章目录 一、什么是幂等性？二、哪些请求天生就是幂等的？举一个简单的例子 三、为什么需要幂等1.超时重试2.异步回调3.消....

从萤石资源到氢氟酸，从氟碳化学品到含氟高分子材料，围绕“氟”的“前世今生”，永和不断挖掘演绎，并向着新能源与碳中和两....

业务功能 文件上传文件下载文件列表查询文件删除文件关联文件作为无业务的数据对象存储后有一个唯一的文件fileId，通过文件f....