
MapReduce 1. MapReduce 概述 1.1 MapReduce 定义 MapReduce是一个分布式运算程序的编程框架,是用户开发“基于hadoop的....
脚本:drop_all_table.sql drop table to_client_song_play_operate_req_d;drop table to_song_info_d;drop table tw_singer....
修改虚拟机网络设置 关闭防火墙 防火墙状态的查看 systemctl status firewalld 关闭防火墙 systemctl stop firewalld 开机防....
克隆前要关闭虚拟机 将虚拟机按照此方法克隆两次 注:IP地址要改成不同的 例如:主机名1——Hadoop100 IP地....
} } catch (IOException e) { e.printStackTrace(); } } } client端: import org.I0Itec.zkclient.IZkChildListener; impor....
dfs.namenode.http-address 地址:9870 dfs.namenode.secondary.http-address 地址:9868
如何使用Elasticsearch? 安装Elasticsearch https://www.elastic.co/cn/downloads/elasticsearch 这里我们选择的是6.2.2版....
对技术有追求,逻辑能力强,喜欢编程,想要通过大数据技术进入大厂,挑战高薪工作的同学;对数据有兴趣、有志于成为数据科学....
1.数据的上传 2.数据的下载 3.NameNode和DataNode的关....
1、把数据中的L去掉,因为Long类型是整数的长整型,所以在正式环境时需要把数据处理干净。。 2、把我继上一篇文章转Long类....
目录 1 一般操作:查找和过滤1.1 读取数据源1.1.1读取json1.1.2 读取Hive表 1.2 取数据列 1.3 过滤算子filter(filter等价....
关键词 mybatis-plus 、 druid 、跨不同数据源、同一个连接跨库查询 项目场景描述 1.项目数据库db_data_link和dolphinsch....
6. 并行度机制 6.1 MapTask的并行度 MapTask的并行度指的是map阶段有多少个并行的task共同处理任务,它影响到整个job的处理....
安装步骤(图文) 1.第一步: 安装otp_win64_20.2.exe 右键以管理员身份运行 接着一直点击下一步傻瓜式安装 2.第二步: 安....
1> 准备工作我使用的版本: otp_src_23.1.tar.gz 和 rabbitmq-server-generic-unix-3.8.8.tar.xz 安装节点,RabbitMQ安装(....
目录 一,ES简介 1,es实现原理 2,基本结构 3,ELK 二、Linux搭建环境 1,jdk安装 2,安装Elasticsearch 3,启动es 4,启....
发布确认 1、发布确认原理2、发布确认策略2.1 开启发布确认的方法2.2 单个确认发布2.3 批量确认发布2.4 异步确认发布 3、三....
目录 1、Zookeeper服务注册与发现 1.1、注册中心Zookeeper 1.2、服务提供者 1.3、服务消费者 2、Consul服务注册与发现 2.1、....
ElasticSearch之文档、索引和基本API 文档(Document)JSON文档文档的元数据 索引索引的不同语义Type传统关系型数据库和es....
Prometheus 是一款面向云原生应用程序的开源监控工具,常用于监控微服务、操作系统、MySQL、Redis、Flink、RocketMQ / Rabbi....