大数据知识_大数据学习笔记

主要记录Flink使用过程中的一些问题，不定时更新 软件版本 Apache Flink 1.13.2 Apache Hadoop 3.2.2 Apache Hive 3.1.2 Apa....

演讲嘉宾：华为消费者云服务 推送服务产品总监 大家好，非常感谢大家的到来，跟我们一起做分享和交流。 现阶段，HMS Core带....

0. 环境 本次演示环境使用metersphere版本：v1.13.0 设置k8s节点包括1台master和1台worker； 应用部署控制管理器使用deploym....

文章目录 Redis7.1、Redis的介绍7.2、Redis的数据类型7.2.1、String字符串7.2.2、hash列表7.2.3、list7.2.4、set集合 7.3....

有关spark调优可以从三个方面（代码优化、参数优化、数据倾斜优化）进行考虑 目录 代码优化参数优化(spark提供最佳的计算位....

前言         Map是个接口无法直接创建对象,可利用多态为其创建对象         实现Map接口的类        ....

分享自微信公众号：大数据兵工厂 Exactly-Once delivery。在很多评论中，甚至被认为是理论上几乎不可解决的问题。对于此技术....

kafka教程 1.offset四个概念：2.两种 offsetCurrent OffsetCommitted Offset 3.服务端常用命令1.查看所有 topic2.查看 top....

**自学天坑专业小白第一次面试经历分享，竟然过了！！**非常开心和激动，给自学的分享一下自己的小小经验。 本人97年去年毕....

依靠数据分析来评估、诊断、优化 问题分析的思路： 1.问题定位 2.主要责任人 3.具体原因 分析原因的方式：对比分析、维度分....

导读伴随着大数据技术的不断成熟以及数字应用场景不断落地，与大数据相关的软件市场不断扩大，而大批服务于大数据技术及应用....

最近启用filebeat连ES的时候报错：couldn't connect to any of the configured Elasticsearch hosts 提示无法连接，原....

1 hadoop 常用命令 1.1 hdfs常用命令 hadoop fs -put ./liubei.txt /user/atguigu/test/hadoop fs -get /sanguo/shuguo/kong....

Centos7 搭建单机Spark分布式集群 1. JDK Hadoop Spark安装与配置1.1 解压包1.2 配置环境变量 2. Scala安装与配置2.1 Scala....

在刚刚发布的 OceanBase社区版 3.1.1 中，OceanBase 开放了一组新的 API 叫做 Table API ，hbase -> HBase 。本文作为源....

Hadoop 1.0两大核心组件MapReduce和HDFS，均在不断发展中遇到了自身的局限性和不足，因此都有2.0进行优化发展。 一、MapRedu....

检查服务器是否开放端口 修改文件elasticsearch.yml 博主报错 ERROR: [1] bootstrap checks failed[1]: max virtual memory....

Spring面试总结 1. 什么是Spring?2. 什么是控制反转(IOC)?1. 什么是Spring IOC容器?2.什么是依赖注入(DI)?3. 依赖注入的方式....

如何在不查看人均GDP的情况下判断一个城市的发展情况呢？一是看该城市的夜景，二是看该城市的轨道交通。夜幕降临的时候，一....

window 窗口是处理无界流的核心。Windows将流分成大小有限的“桶”，我们可以在这些桶上进行计算。 一个 Flink窗口化程序的....