大数据知识_大数据学习笔记

1.在Mysql中创建dim_ddl_convert来存放MYSQL数据类型与HIVE数据类型的映射关系 CREATE TABLE dim_ddl_convert ( ....

相信大家都知道，每个项目中会有一些配置信息放在一个独立的properties文件中，比如application.properties。这个文件中会放....

自大数据兴起以来，关于如何实现数据价值的话题一直被人们所热议。 如今看，实现数据价值、释放数据生产力，让数据更好地打....

1. ZooKeeper 概述 ZooKeeper 是一个数型目录服务，它是 Apache Hadoop 项目下的一个子项目。ZooKeeper 是一个开源的分布式....

1.简介 EBatis是一个声明式的ElasticSearch ORM框架。类似MyBatis，只需要定义接口，便可轻松访问ElasticSearch，优雅地帮助....

这套互联网 Java 工程师面试题包括了：MyBatis、ZK、Dubbo、EL、Redis、MySQL、并发编程、Java 面试、Spring、微服务、Linux....

QingStor 是 QingCloud 基于多年的大规模公有云实践，通过软件定义，为云而生、为核心业务打造的企业级分布式存储产品。Qing....

一、Hue操作HDFS 进入HDFS管理界面 HDFS新建文件夹 新建文件 上传文件 查看HDFS文件内容 编辑HDFS文件 ....

错误信息 [cxy@bigdata-mama02 tools]$ java -jar IoTData-1.0-SNAPSHOT.jar localhost:9092 IoTTopic1Exception in thread ....

记录在Windows安装运行Kafka 一、安装JDK 二、安装 Zooeleeper 1、下载安装包：http://zookeeper.apache.org/releases.html....

《大数据之路：阿里巴巴大数据实践》pdf版下载 链接: https://pan.baidu.com/s/1Sjul8NG71nwIsiuyXWI13A 密码: sqat 好用的....

1 CAP理论 C：consistency强一致性 A：availability可用性 P：partition tolerance分区容错性 CAP理论的核心是：一个分布式....

文章目录 一、kafka网络模型二、kafka零拷贝技术的支持三、机械硬盘HDD和固态硬盘SSD的抉择四、普通磁盘JBOD和磁盘阵列RAID....

1.什么是MapReduce         MapReduce 是一个分布式运算程序的编程框架，是用户开发“基于Hadoop 的数据分析应用”....

工具   postman 请求方法    get 请求URL    Elasticsearch地址/_all

一、前言 最近生产遇到一个类似kafka消息丢失的问题，不太好排查，可能是以下几种情况： 1.生产者把消息发送给kafka前就失败....

Linux下安装Elasticsearch 下载Elasticsearch最新版本解压到指定目录并将其重命名创建一个普通用户elk用来运行elasticsearch....

本章内容 理解数据 认识数据分析 数据分析工具Python 集成开发环境和文本编辑器 使用Jupter Notebook 理解数据 需要分析的....

Flink中如何获取窗口的相关时间戳的方法 TimeWindow.getStart 获取窗口的开始时间戳，这是这个窗口开启的第一个时间戳 TimeW....

一，准备工作 2.创建SpringBoot项目 2.添加RabbitMQ依赖 3.修改pom.xml文件 4.0.0 org.springframework.bo....