大数据知识_大数据学习笔记

多机器部署 本次集群搭建使用三台机器 环境要求 每台机器需要保证单节点elasticSearch能正常运行，单机部署：centos7下Elast....

1.启动RabbitMQ 2.修改config服务端 依赖：（boot和cloud版本不要太高，不然刷新配置的请求不能用） org.sp....

开发平台： SQLSCAN:代码检测 SQLSCAN根据所配置的规则执行相应的规则校验。 SQLSCAN将检查成功或者失败的信息传回D2. D2的I....

学习hadoop你需要了解哪些： mapreduceHDFSYARN 简介： 当前是数据大爆发的时代，数据的生成速度正在不断加快。 我们需要通....

一、ElasticSearch elasticsearch 是一个分布式的搜索引擎，处理速度非常快，基于 Lucenc，使用时要用 restful 风格的接口。....

作为服务注册中心，Eureka 比 Zookeeper 好在哪里？ 著名的CAP理论指出，一个分布式系统不可能同时满足 C（一致性）、A（可....

本文为博主九师兄（QQ:541711153 欢迎来探讨技术）原创文章，未经允许博主不允许转载。 文章目录 1.概述 2. 案例 ....

一、dubbo 框架 是一个分布式的服务框架，服务的注册和发现，负载均衡，SPC（远程过程调用）。 二、zookeeper中间件 hadoop....

1.我在输入查询数据库语句时出错，错误如下图： 然后我返回去检查启动的Hadoop与zookeeper，发现zookeeper的状态缺少一个fo....

安装Hadoop 前言 需准备文件： hadoop-2.6.0-cdh5.11.2.tar.gz, jdk-1.8.0-8u60-linux-x64.rpm 提示：以下是本篇文章正....

Zookeeper简介、两大核心概念以及节点操作 1、Zookeeper简介1.1、什么是Zookeeper 2、Zookeeper两大核心概念2.1、文件系统....

一、什么是hadoop hadoop是一个分布式系统架构，负责海量数据的存储和海量数据的分析计算。 spark框架可以在Hadoop之上做内....

文章目录 一、RabbitMQ 简介1、是什么2、能干什么3、有什么特点 二、RabbitMQ 安装1、Docker 安装2、在 Docker 中安装 Rab....

用 Flink SQL 解析 JSON 格式的数据是非常简单的,只需要在 DDL 语句中设置 Format 为 json 即可,像下面这样: CREATE TABLE....

Hadoop的访问页面 Hadoop2.X hdfs界面：NameNode进程所在主机的ip:50070 SecondaryNameNode界面：SecondaryNameNode进程所....

一 重复消费 1.1 原因 强行kill线程，导致消费后的数据，offset没有提交（消费系统宕机、重启等）网络波动，导致offset没提....

背景 服务可观测性，预测与发现系统性能瓶颈，透视系统状态，为系统调优和查故障提供可靠数据支撑参考和关键词 参考资料: ht....

IK分词器(elasticsearch插件) IK分词器：中文分词器； IK提供了两个分词算法: ik_smart和ik_max_word ,其中ik_smart为最少切....

es初识和工具安装 es简述 Elaticsearch，简称为es，es是一个开源的高扩展的分布式全文检索引擎，它可以近乎实时的存储、检索....

文章目录 生产者一 消息提供者开发1.1 过程1.2 代码实现1.3 重点配置参数1.4 消息的发送 二 原理解析2.1基本知识2.2 拦截....