大数据知识_大数据学习笔记

目录 什么是kafka消息队列的应用场景kafka架构kafka消息存储和生产消费模型kafka存储模型topickafka消费模型 kafka特点消费....

在信息化时代里，作为人们获取信息、汲取知识的素材和源泉，数据已经成为社会生产和生活既重要又具体的资源。当然，要让数据....

数据库索引优化(给你一条慢SQL怎么优化)怎么判断索引是否失效怎么写悲观锁的SQL悲观锁和乐观锁的场景SQL的执行计划b+树是如....

近日，在社区开发者们共同努力下，Flink CDC 社区宣布 Flink CDC 2.1 正式发布。据悉，2.1 版本包含 23 位贡献者贡献的 100+....

上一篇文章中，本地调试，发送的消息类型是SEND_MESSAGE_V2   broker和nameSrv一样，都是同个NettyRemotingServer来监听连....

Hadoop-MapReduce左外连接(通用型) 来源篇 书名 数据算法-Hadoop/Spark大数据处理技巧 作者 Mahmoud Parsian著; 苏金国 杨健....

基于ES 7.7, 官方文档 https://www.elastic.co/guide/en/elasticsearch/reference/7.7/indices.html#indices 传送门: 上....

HDFS源码-DataNode启动流程 版本号：hadopp2.7.0 文章目录 HDFS源码-DataNode启动流程前言一、DataNode启动1、相关类2、重....

选举机制 第一次选举 SID：服务器ID。用来唯一标识一台 ZooKeeper 集群中的机器，每台机器不能重复，和myid一致。ZXID：事....

1、在每个节点生成ssh密钥 cd .ssh ssh-keygen -t rsa 2、在主节点上将公钥拷贝到一个特定文件authorized_keys  cp id_rs....

1.Refresh 时间间隔 为了提高索引性能，Elasticsearch 在写入数据时候，采用延迟写入的策略，即数据先写到内存中，当超过默....

1.term term 根据 keyword字段 精确匹配 实例 GET index3/_search{ "query": { "term": { "book_name": "设计" ....

记一次替换Hadoop/HDFS/HBASE的磁盘 1. 需求 公司近几个月业务增长很快，数据量也大幅增长，但是存储数据的磁盘眼看就要满载....

- 一、说明： 从机器B root用户免密登录机器A hadoop用户 二、操作流程 #在机器B中ssh-keygen -t rsa#一直回车即可#会生成/r....

基于 ES 7.7 官方文档 搜索 (Search API) 返回与请求中定义的查询匹配的搜索结果(hits)。可以使用查询字符串参数q或 req....

2021SC@SDUSC 本篇我将对hadoop-tools中的Resource Estimator Service进行分析 Resource Estimator Service 概念： 原因： ....

前言         正要测试下hadoop的相关程序，我电脑的Vm虚拟机炸了,没找到恢复的办法，虚拟机中的几个系统也都没了。....

破译“生命天书”20年 播报文章 人民资讯 发布时间: 08-2409:03人民网人民科技官方帐号 「本文来源：中国农网」 20年前，我....

【基本方法】 1.创建索引 PUT index1 PUT index3 { “mappings”: { “properties”: { “book_id”:{ “type”: “long” }....

consul : Failed to configure keyring: invalid character ‘"’ after top-level value 解决办法 1、集群内所有机器 keyr....