大数据知识_大数据学习笔记

一、ES离线单机版安装教程 1、官网https://www.elastic.co/cn/downloads/past-releases#kibana下载linux版本的elasticsearch....

CepOperator -> Sink: Print to Std. Out (3/6) (c2b48c8d25739a404a24562a6c3b5d4e) switched from RUNNIN 出现这个错误的....

2021第六届数维杯A题新冠肺炎背景下的港口资源配置优化策略 思路正在写，请耐心等待 A题思路已出 请查看： 点击跳转 背景下....

1、顺序读写 kafka的消息是不断追加到文件中的，这个特性使kafka可以充分利用磁盘的顺序读写性能 顺序读写不需要硬盘磁头的....

文章目录 1.分布式文件系统HDFS1.HDFS的来源2.HDFS的架构图之基础架构2.1 master/slave 架构2.2 名字空间（NameSpace）2.3 ....

1、发现问题 现象：重启hadoop集群，namenode报错无法启动。 报错： 2、分析问题         一看报错有“OutOfMemoryE....

1、发现问题 场景：当多个sql脚本任务同时在运行的时候经常报如下错误。 具体报错：FAILED: Execution Error, return code....

Spark Sql 相关设置及调优 参数设置设置笛卡尔积设置 shuffle 的并行度禁止精度损失开启动态分区join 和 left join 的选择 ....

活动介绍： 「数据仓库技术交流群」已经正式启动每日SQL打卡，帮助大家扎实基础，努力工作之余，别忘了自我提升。 欢迎报名....

并发编程（七）--CountDownLatch CountDownLatch是什么CountDownLatch如何工作APIcountDownLatch应用场景例子 CountDownL....

点击上方蓝色字体，选择“设为星标” 回复”面试“获取更多惊喜 各位读者大佬们晚上好。 前两天一个读者找到我，问了一....

一.依赖 org.apache.hadoop hadoop-mapreduce-client-core 2.7.2

目录 一、命令方式做分页 1.1 常见的分页方式：from+size 1.2 scroll方式 1.3 search_after 的方式 二、java api做elasticse....

flume采集文件保存到kafka 创建文件flumeexec.conf a1.sources = r1a1.sinks = k1a1.channels = c1 # 描述和配置source组件....

背景 pulsar集群版本为2.7.0pulsar配置了基于kerberos的安全认证在conf/broker.conf文件里配置了saslJaasBrokerSectionName=....

首先第一步：安装docker  10.12以上的操作系统可以安装Docker Desktop for Mac docker mac版下载地址：  https://docs.doc....

文章目录 Ububtu18.04安装Zookeeper3.5.7Zookeeper安装standlone模式安装配置伪分布式的Zookeeper配置全分布式的Zookeeper ....

2021第六届数维杯数学建模C题冠状病毒病下的旅游业未来发展计划 思路正在写，请耐心等待 C题思路已出 请查看： 点击跳转 冠....

数据实体提取与数据扩充 7.1 获取飞机具体航班数量并保存到数据库7.2 利用Flask进行数据展示7.3 数据查找与索引添加7.4 利用....

规划 192.168.56.11 k1192.168.56.12 k2192.168.56.13 k3192.168.56.21 pg11n1192.168.56.22 pg11n2 主机 k1、k2、k3 ....