大数据知识_大数据学习笔记

HDFS写数据流程 客户端通过DistributedFileSystem向NameNode请求上传文件，NameNode检查目标文件是否已经存在，父目录是否存....

文章主要进行 基于LSI的文本相似度检索（Text Similarity Queries）。 给定一个带查询文档，发现该文档和其他一组文档的相似....

爆报错截图如下：此错误是在centos7中启动elasticsearch6.0是报的错，原因报错中也已经写明是因为elasticsearch不能用root用....

Kafka高效的读写机制 顺序写入 根据磁盘的机械机构来进行顺序写入可以使写入速度更快 零复制技术 由操作系统对文件直接进....

知识点 Kafka基本架构的介绍： Broker Kafka集群包含一个或多个服务器，这种服务器被称为brokerTopic 每条发布到Kafka集群的....

Producer的事务 问题：（当有多台follower进行同步时，其中一台机器宕机，ack机制下使得同步重新启动，当重新同步时。机器恢....

hadoop 特点 扩容能力 能可靠(reliably)地存储和处理PB级别的数据。如果数据量更大，存储不下了,再增加节点就可以了。 成本....

9.6  数据中台五要素         数据中台的五要素是数据、业务、算法、应用和组织，这五要素是做好数据中台的基本要....

===================================== AirFlow 部分======================================== 1.Airflow 任务假死问题 版....

人工智能从5、6年前的 “黑科技”变成了今天的“热科技”，背后离不开算力支撑能力的巨大飞跃。2020年以GPU为代表的AI加速芯....

截止到10月24日18点，为期十天的2022年的国考报名已经落下帷幕了，作为一项国家级别的人才选拔考试，竞争程度必然异常激烈，....

作者：xin2801 链接：https://www.nowcoder.com/discuss/761529?source_id=discuss_experience_nctrack&channel=-1 来源：牛....

@ZHANGQIANYI2020 Oracle-医学信息工程专业 3.2 启动数据库与实例3.2.1. 数据库的启动步骤3.2.2. 启动模式3.2.3. 转换启动....

Linux环境下RabbitMQ安装与卸载 centos7+系统镜像、yum安装1. 更新yum到最新2. 安装erlang环境3. 安装RabbitMQ3.1 npm解压安....

B站大数据教程深度赋能，限量学习大礼包等你领取！ 活动时间：10月25日-11月10日 你将获得 满满的干货：精品大数据全套教程....

材料版本数量备注安装包hbase-2.3.3-bin.tar.gz3虚拟机CentOS 7.23IP/3192.168.241.110/120/130服务器名/3hadoop 、hadoop01....

报错信息如下所示： Caused by: org.apache.kafka.common.errors.RecordTooLargeException: The message is 1527150 bytes w....

1.连接集群 首先在项目目录“/src/main/java/com/example/es”下新建common目录，并在common目录下新建SampleClusterRouterP....

之前打算直接在ambari上安装配置flink服务方便管理，但是发现ambari集成的flink会出现很多问题反而不方便管理（可能是没找到....

distinct算子 1）函数签名 def distinct():RDD[T] //默认情况下，distinct会生成与原RDD分区个数一致的分区数 2）功能说明：....