大数据知识_大数据学习笔记

集群搭建遇到的一些坑 报错： Hostname mismatch: node "rabbit@node2" believes its host is different. Please ensure tha....

1 hive环境搭建 2hive 安装 2.1 hive交互命令 1） “-e”不进入 hive 的交互窗口执行 sql 语句 [root@hadoop102 hive]# bin/....

Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利....

一、Nacos注册中心 1、pom.xml配置依赖 com.alibaba.cloud spring-cloud-starter-alibaba-nacos-discovery 2、applic....

一、单应用锁： 说明：只能在非集群Web应用(JVM环境)中使用。 1.update行锁，在...Mapper.xml中：          update 表....

启动一个分布式Minio实例，你只需要把硬盘位置做为参数传给minio server命令即可，然后，你需要在所有其它节点运行同样的命....

Kafka kafka消费数据同一时刻，kafka当中数据只能被一个消费者组下面的一个消费者所消费。 kafka消费者在消费数据的时候，....

获得gp的数据库连接池，使用连接池，不要使用单连接 package com.ysservice.dataStreamApi.utils;import com.alibaba.druid.....

集群规模确定 从数据量、计算性能要求、可靠稳定性、容错性等方面考虑。 数据量 现有数据量（如现有历史数据）和增量数据（....

关注并星标 每周阅读港科夜闻 建立新视野 开启新思维 1、香港科技大学与广州粤芯半导体技术有限公司签署合作协议，提速半导....

HBase(二)之常用操作及读写数据原理 HBase 命令 HBase中保存的都是二进制数据 1. 客户端进出命令 # 进入客户端：hbase sh....

参考：Elasticsearch之index_closed_exception - 天之骄子zz - 博客园 如果上面可解决，那就没必要看下面内容。 如果postman....

import org.apache.kafka.clients.producer.KafkaProducer;import org.apache.kafka.clients.producer.ProducerRecord;import ja

文章目录 消息存储机制1.前言2.核心存储类：DefaultMessageStore3.消息存储流程4.消息存储文件5.存储文件内存映射5.1.Mapper....

es的配置需要注意的地方分为系统配置和es本身相关的一些配置 ES系统配置优化 1.增大进程可以打开的文件数， vim /etc/securi....

整理一份成长为 Java 技术专家的 7 个技能体系，希望对你的高薪之路有所参考   1.Java 编程必备 Java 编程必备技能 多线....

本教程演示了如何使用 Debezium 监控 MySQL 数据库。随着数据库中的数据发生变化，您将看到生成的事件流。 在本教程中，您将....

上文对hbase的建表、对数据的插入、查询、删除进行封装 (62条消息) Hbase学习——对表操作进行封装_小镭敲代码的博客-CSDN博....

目录 文章目录 一、Tableau介绍 二、数据连接 1.连接类型 2.连接方式 3.提取方式 三、基础图表制作 1.柱状图 2.条形图 3.【....

前言 讲数据质量监控重要性和理论的文章，去网上可以搜到很多，这篇文章主要讲怎么设计和开发数据质量监控平台。 第一部分：....