大数据系统知识_大数据系统学习笔记

elasticsearch 7.16.2 单机部署及密码认证 一、部署前准备1、ulimit 调优 二、部署ES单机 一、部署前准备 1、ulimit 调优 ....

目录 背景复现代码内存信息 总结解决方案pipe详解介绍：pipe 容量 背景 Fate On Spark在测试大文件上传的时候，遇到当文件....

TezChild.run TezChild get a task from containerReporter ListenableFuture getTaskFuture = executor.submit(containerReport

记一次线上RocketMq消费堵塞问题 小伙伴反应业务数据推送状态不更新了，线上查看topic消费组消费状态，发现已经堵了500多....

一个多世纪以来，汽车作为最伟大的发明之一为人类的出行带来了极大便利，其在舒适性、安全性及资源消耗等方面都有显著提升。....

2021年终总结 2021年是喜悦及困苦并存的一年。在这一年里迎来了宝宝六一的降生，初为人父满怀喜悦；也经历了媳妇、岳母生病....

1. 生产者 1.1 分区策略 分区的原因： 方便在集群中扩展：每个 Topic 可动态的调整 Partition 的数量以适应整个集群提高并发....

报错信息： 2021-12-31 11:02:51.955 [Source: TableSourceScan(table=[[default_catalog, default_database, jdbc_source_t....

个人对Elasticsearch的理解： 1）是什么：做全文搜索的。mysql数据模糊查询需要全表扫描，数据量大了，查询速度超级慢，所以....

Apache Flink漏洞（CVE-2020-17519） 漏洞简介： Apache Flink 1.11.0中引入的一个更改(也在1.11.1和1.11.2中发布)允许攻击....

今天是2021年的最后一天，回顾这一年，似乎匆匆就过去了。从成为产品经理开始，一直做的大数据平台相关，离线开发、实时开发....

质量基础设施一站式服务平台建设，NQI线上系统开发方案 质量基础设施一站式服务平台满足市场企业的需求，全方位，全链条的服....

提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档 文章目录 前言一、ZooKeeper是什么？怎么来的二、ZooK....

RabbitMq是一个基于erlang语言写的消息队列，是典型的生产消费者模型。关于队列，我相信大家也都熟悉，特点是有序、先进先出....

前言 “除了上帝，任何人都必须用数据说话”，在大数据时代，使用数据驱动产品迭代已经成为行业共识。在分析应用数据之前，....

用户的任务会以job方式提交给集群，runtime负责整个作业的调度，支持各种作业方式。 简单的一个作业表单 实际上作业是： ....

86.1 演示环境介绍 Livy版本为：0.4CM和CDH版本为：5.13.1集群未启用Kerberos 86.2 操作演示 将作业运行的jar包上传到HDFS目....

一 确定 安装的环境版本 JDK版本与兼容 建议java11 Support Matrix | Elastic 操作系统-推荐使用7.6 Support Matrix | Elast....

用springboot启动dubbo时，如果出现这个报错： 1.检查依赖版本，然后检查配置文件关于dubbo的前缀，低版本是spring.dubbo为....

一个普普通通的大三小白，明年即将实习。 问题：         在集群上运行了一组sql。一个很简单的sql就是分组求和。....