大数据知识_大数据学习笔记

Kafka 在美团数据平台的现状 Kafka 出色的 I/O 优化以及多处异步化设计，相比其他消息队列系统具有更高的吞吐，同时能够保证....

什么是ETL？ 什么是ETL？为什么需要ETL？ 通俗易懂型：互联网业务实战（三）--ETL和推荐_firsthealth的博客-CSDN博客 全面详....

线程的应用——线程池 1.线程池的实现 1.1 线程池：一堆线程等待着处理任务——非常典型的生产者与消费者模型 1.2 组成：一....

引言 Flink 提供了专门的 Kafka 连接器，向 Kafka topic 中读取或者写入数据。Flink Kafka Consumer 集成了 Flink 的 Checkp....

交换机的类型：BuiltinExchangeType.TOPIC 使用routingKey匹配(通配符) 通配符规则 #:匹配一个或多个词 *::匹配不多不少恰好....

1.概述 kafka报错 The replication factor in manual replication assignment is not equal to the existing replica 请参考....

练习hadoop搭建时，在三台虚拟机上分别启动zookeeper时，在第二台和第三台启动成功，在第一台启动失败。 1.二台和三台启动成....

centos7安装rabbitmq 下载rabbitMQ和对应的erlang 注意下载erlang和rabbitmq需要版本对应，版本的对应关系可以在官网....

压测rpc接口，100并发压测es-cpu 100%-4c，带宽80M。 带宽高是因为返回数据多，cpu高是因为有大量复杂计算。 经过研发排查，....

文章目录 简单模式工作模式发布和订阅模式路由模式主题模式 简单模式 设置启动类 //消息的简单模式@SpringBootApplicatio....

前言：     前面两篇文章分别讲述了本地模式下的协议暴露（InjvmProtocol）和协议消费（InjvmInvoker）。实际到这里的话，....

一、IO+Properties的联合应用 IO+Properties的联合应用是一个非常好的设计理念： —— 以后经常改变的数据，可以单独写到一....

第 1 章 Spark 性能调优 1.1 常规性能调优 1.1.1 常规性能调优一：最优资源配置         Spark 性能调优的第一步，....

写在前面 本文内容基本来源于官网，然后我结合我自己实际工作中的一些场景 把我认为 重要 且常用 的一些操作给记录下来了。....

11月18日，阿里巴巴集团（NYSE:BABA）发布2022财年第二季度财报（2021年第三季度）。财报显示，截至2021年9月30日，阿里巴巴....

curl -XPUT http://127.0.0.1:9200/rtiaes/_settings -d '{ "index" : { "max_result_window" : 2147483647}}'注....

目前RPA正被广泛应用于各行各业，包括电商、物流、财务、银行、金融等领域。RPA作业有跨系统、跨平台操作、24h不疲惫、0误差....

其他sql格式也在更新中，可直接查看俺的这个系列，要是没有你需要的格式，可在评论或私信我，俺现在一天一看 Oracle转换hiv....

@Configuration配置 import org.apache.kafka.clients.producer.ProducerConfig;import org.apache.kafka.clients.producer.....

农业一直是国民经济的基础，是人类衣食之源、生存之本，是一切生产的首要条件。改革开放以来，我国农业生产力大幅度增加，足....