大数据知识_大数据学习笔记

前言 当架构师大刘看到实习生小李提交的记账流水乱序的问题的时候，他知道没错了：这一次，大刘又要用一致性哈希这个老伙计....

1.进入官网 Apache ZooKeeper   2.选择版本下载压缩包     推荐为下载位置为英文路径 3.进行安装 1）在文件夹中创建d....

大家好，我是梦塔，专注分享职场、产品、研发、管理等相关经验。 今天的主题是：java进阶架构师，需要掌握哪些技能！我们用....

show partitions table_name partition(ds = '20220224'); -- 检查特定分区

1.HDFS上传数据 客户端通过FileSystem.create()创建文件对象，同时在HDFS中DistibutedFileSystem具体实现了FileSystem类。客....

启动HDFS时出现错误： Permission denied (publickey,gssapi-keyex,gssapi-with-mic,password). 翻译：许可被拒绝。 解决方....

IBM正在一个十字路口。“在极具挑战的2020年，IBM完成了战略收购和资产剥离，将IBM拆分为两家公司——IBM和Kyndryl，对战略....

序言 官网提供了几种连接器,帮助我们直接配置Kafka,ElasticSearch数据源. 但是在V1.14.3.之前使用的Kafka连接器已经被弃用了....

Hive导论 一、数据仓库概念 数据仓库（Data Warehouse），是一个用于存储、分析的数据系统。 数据仓库的目的是分析，为企业....

看到这篇文章，应该都是看过flink官网的官方示例，这里就不作详细解释，只对其中的代码细节补充个人理解。如果还没看过，可....

文章目录 1.概述 1.概述 Flink 提交任务到yarn报错 Couldn't create proxy provider class org.apache.hadoop.....

导读：在SaaS的经营中，对数据的整理和分析可以帮助我们有效地了解企业经营现状和可能存在的发展机遇。对于企业的不同角色和....

目录 一.Spark Streaming1.Input DStreams and Receivers2.Receiver Reliability3.Transform Operation4.UpdateStateByKey O....

windows安装kafka 参考教程 (https://www.cnblogs.com/mh-study/p/9537970.html) 问题1 zookeeper启动报错：org.apache.zook....

文章目录 1.概述 2.源码 3.KAFKA-5413 4.KAFKA-6264 5.解决 1.概述 偶然kafka报错如下 核心错误关键字： Caught....

文章目录 HDFS组件及优略HDFS的优缺点NameNode(主)DataNode(从)SecondaryNameNodeJournalNode（共享文件的进程） HDFS读写....

我自己资质比较有限，没有悟出什么道理，倒是很深刻地想明白一个道理：不要只是低头走路，更要抬头看路。 说一下我自己的经....

1：整体架构流程 2：目录详情 consumer 消息消费者项目provider 方法提供者项目mq RocketMQ项目point 打点接口项目3：关键....

定义 所涉及的资料量规模巨大到无法透过主流软件工具，在合理时间内达到撷（xie）取、管理、处理、并整理成为帮助企业经营决....

下载 安装后   连接 发送 带key 不带key的数据