数据的上传 创建文件夹：hadoop fs -mkdir /BD19 查看文件夹内容： hadoop fs -ls /BD19上传数据：hadoop fs -put....
hive中的爆炸函数写法： SELECt student, scoreFROM testsLATERAL VIEW explode(scores) t AS score; 爆炸函数在presto....
国家“十四五”规划纲要、“十四五“数字经济发展规划等文件提出，要积极完善城市信息模型平台和运行管理服务平台，构建城市....
win10系统kafka_2.12-3.1.0创建topic命令 进入到kafka安装目录的inwindows下，执行命令 kafka-topics.bat --create --bootst....
RabbitMQ学习总结 一、基本原理 订阅发布机制,生产者发布消息到队列，消费者订阅该队列，内部的监听机制监听到订阅的队列有....
elasticsearch 查看当前集群中的 master 节点是哪个需要使用 _cat 监控命令，具体如下。 查看方法 es 主节点确定命令，以 ki....
es启动报错 错误排查 检查java环境变量是否配置 es启动要使用非root账户 es账户是否授权 如图：我的es账户未授权 通过....
1.概述 主要对基于Tez的map数和reduce数测试与调优 2.数据准备 （1）表信息 本次测试的表和sql都是使用的TPC-DS Tez文件存....
搭建单例模式将采用finalshell连接Linux虚拟机，如果不觉得麻烦，也可以直接在Linux虚拟机上进行搭建。 工具：finalshell、V....
文章目录 一、本地运行模式 1.1 官方Grep案例1.2 官方WordCount案例 二、伪分布式运行模式 2.1 配置2.2 运行MapReduce程....
docker启动rabbitmq后无法访问15672端口，经查找资料得知，rabbitmq默认web界面管理插件是关闭的，只要通过命令开启就行 1、....
Hadoop HDFS：一个高可靠、高吞吐量的分布式文件系统，对海量数据的存储。 Hadoop MapReduce：一个分布式的资源调度和离线并....
强迫症死亡现场，原来ES7.x开始，JDK开始使用java 11, 如果本地JDK使用的不是JDK11，就会报出这个难看的警告，还在用java 8 ....
安装Scala后，因为笔者使用idea进行编译，所以大概是需要新建项目才能新建类，所以打算安装sbt为后期项目管理做准备。但是下....
https://mp.weixin.qq.com/mp/appmsgalbum?action=getalbum&__biz=MzI1NDY0MTkzNQ==&scene=1&album_id=1591614521561923586&coun
pyhton中，想像scala一样，对spark使用资源做指定，如： spark-submit --principal $principal --keytab $keytab --name Tes....
version: "3.3"services: elasticsearch: image: elasticsearch:7.17.1 container_name: elasticsearch ....
在Elasticsearch的早期版本中，**过度的合并将会拖慢集群，以至于索引和搜索请求慢得无法接收，或者是所有得节点都无法响应....
每个软件应用为了方便排查运行时出现的问题或者一些做一些数据记录，都会提供相应的日志记录，Elasticsearch也不例外，Elast....
随着云计算、大数据时代的到来，我国进入新发展阶段，大数据数字化深刻影响了相关专业的发展变革。以大数据应用为代表的新技....
名师互学网 版权所有 (c)2021-2022 ICP备案号：晋ICP备2021003244-6号
