前沿技术知识_前沿技术学习笔记

一、环境准备 （1）本地搭建hadoop环境 将hadoop相关文件放到目录下如下 配置环境变量 在终端输入hadoop version 如下....

为了节省时间，实战案例只贴了一些关键代码，需要的可以去下面的git仓库直接拉取。  1. 什么是MQ？ MQ全称Message Queue....

文章目录 1.时间语义概述2.水平线 Watermark2.1 Watermark 介绍2.2 Watermark 特点2.3 如何生成水位线2.4 有序流2.5 无序流2....

一、核心概念释义 Application 基于Spark的用户程序，由集群上的Driver和Executor组成。简单的说，一个Application应用程....

文章目录 1.概述 2.方案1 3.方案2 1.概述 测试点：有人遇到这样的情况，他一个消费者正在消费一个环境的topic，然....

很多同学在提交 Flink 任务的时候遇到下面这种报错不知道怎么排查.完全处于懵逼状态，竟一直盯着这个报错看。 记得一定要去....

腾讯云服务器CentOS 7.6安装基本中间件   摘要：由于最近开始学习Redis和Zookeeper了，因此使用云服务器的频率开始多了起....

需求：我想研究以下es参数调优问题，第一步需要先知道集群所有的参数。但是在网上搜了好多，都是从官网上cv的，很明显不够。....

一、RabbitMQ的介绍 RabbitMQ 是一个消息中间件：它接受并转发消息。你可以把它当做一个快递站点，当你要发送一个包裹时，....

eclipse配置MySQL 8环境并简易操作 环境准备一、下载JDBC驱动二、配置环境1.新建项目2.导入MySQL驱动 三、简易示例 环境准....

ClickHouse实战系列目录 Clickhouse部署（单节点及集群）及实战案例验证 文章目录 ClickHouse实战系列目录前言一、安装指....

Spark环境搭建 前言Spark环境搭建-Local-本地模式准备工作原理操作-开箱即用测试 Spark环境搭建-Standalone-独立集群原理操....

目录 一、简介 二、测试 1导出100万行数据测试 2exportExcel堆内存 3exportBigExcel堆内存  三、关键代码 controller Exce....

什么是Kafka？ Apache KafKa 是一款开源的消息引擎系统。 什么是消息队列 消息引擎系统是一组规范。企业利用这组规范在不同....

这里需要提到 Flink 中的几个关键组件：客户端（Client）、作业管理器（JobManager）和任务管理器（TaskManager）。我们的代....

0.前言 目前，电商发展趋势迅猛，网购已经渐渐成为主流的购买方式。用户在进行网络购物时，会产生海量的相关数据，这些数据....

目录 一、Hive的简介 1.1 出现的原因 1.2 hive是什么 1.3 Hive的优缺点 二、hive的框架原理(重点) 二、hive的框架原理(重点....

文章目录 Hadoop 安装以及配置一、安装1.安装SSH，设置SSH无密码登录2. 安装jdk3.安装Hadoop 二、配置三、其他配置四、出....

今年两会，“东数西算”是最吸睛的热词之一。这一国家新型基建工程的启动，在整个信息技术领域引起极大关注。三大电信运营商....

前言 最近在阿里云服务器上重新安装了jenkins，同时打算集成更多的常用的插件，例如sonar。 很多年前，我在自己的windows电....