
背景 作为一家搜索引擎公司,我们会很倚赖 ES 帮忙处理包括文章召回,数据源划分,实体、标签管理等任务,而且都收到了不错....
一:时间,时区设定 1.查看当前系统日期和时间: date [root@kevin ~]# date2021年 12月 18日 星期六 21:41:42 CST 2.在中....
1.1 添加依赖 1.2 配置application.yml 在这里插入图片描述 1.3 编写RabbitMQ配置类 1.4 编写发送消息 1.5 编写接收消....
1.将下载的flume安装包拖至software文件夹下 2.将flume安装包解压到/opt/module/文件夹下 cd /opt/software/tar -zxvf 安....
1、RPC通信原理解析 1.1、需求: 模拟RPC的客户端、服务端、通信协议三者如何工作的 1.2、代码编写: (1)在HDFSClient项....
前言 相关文章 《01-kafka单机部署》 《02-kafka集群搭建》 >> 更多kafka常见问题 进入文集 应用场景 如阿里云等公有云....
分词器: ES在创建倒排索引时需要对文档分词。在搜索时,需要对用户输入内容分词。 但默认的分词规则对中文处理并不友好。 ....
Cloud Stream 主要使用的 MQ (消息中间件) ActiveMQRabbitMQRocketMQKafka 如此多的消息中间件,要都学完,人可能都没了! ....
一、例题 对于两个输入文件A和B,编写spark独立应用程序,对两个文件进行合并,并剔除其中重复的内容,得到一个新文件c。....
2021SC@SDUSC 山大软工实践hive(13)-查看逻辑优化在总体流程上的位置 文章目录 山大软工实践hive(13)-查看逻辑优化在总体流....
Kafka Rebalance 当kafka分区和消费者关系发生变化时,会触发重平衡机制。将消费者和分区的对应关系重新划分。 1 kafka reba....
一、例题 每个输入支件表示班级学生某个学科的成绩,每行内容由两个字段组成,第一个是学生名字,第二个是学生的成绩;编....
Flume基础概念及其环境配置 1、基本组件 1)source:收集(负责从xxx地方采集数据) 2)channel:聚集(数据存入内存/文件/....
企业数据湖项目 数据湖的概念最初是由大数据厂商提出,数据都是承载在基于可向外扩展的HDFS廉价存储硬件之上的。但数据量越....
https://github.com/yangxiaojiegithub/yxj 变量名 var 变量名 [: 变量类型] = 初始值 var i:Int = 10 val 常量名 [: 常量....
目录 一.ELK日志分析系统简介 1.ELK的三大组成 2.完整日志系统基本特征 3.ELK中日志处理步骤 4.Elasticsearch 5.Logstash ....
kafka controller 1 分区和副本 一个topic有多个分区, 一个分区有多个副本, 副本负责保证分区的高可用, 副本中有一个为le....
更多课程关注工众呺【彩虹好课】 学习大数据首先我们要学习Java语言和Linux操作系统 Java 大家都知道Java的方向有JavaSE、J....
简介 ES官方提供了各种不同语言的客户端,用来操作ES。这些客户端的本质就是组装DSL语句,通过http请求发送给ES。 java就是R....
docker启动rabbitmq命令 docker run -d -p 15672:15672 -p 5672:5672 -e RABBITMQ_DEFAULT_USER=admin -e RABBITMQ_DEFAULT_....