
目录 一、前言 二、比赛分类 三、较高水平比赛的时间线 一、前言 博主四非大三在读,坐标江苏常州,先后参加过数竞、数模、....
云存储 万企上云,云计算作为当今时代发展趋势,云计算是一种网上在线存储的模式,即把数据存放在通常由第三方托管的多台虚....
大数据特征 体量巨大 种类繁多 处理速度快 价值密度低 大数据的数据结构 行业/企业数据 互联网数据 非结构化数据 大数据应用....
问题复现 今天加班写了一个接口,刚开始发现诶数据还是正常的,觉得可以上线了,因为这个接口只是去ES查了一次数据,统计了....
1.基础 Shell操作第一步是启动Shell,使用以下命令: hbase shell 离开可以输入: exit或者quit 2.命令 在输入命令的....
目录 1 Hbase简介 1.1 初识Hbase 1.2 Hbase的特性 2 HDFS专项模块 2.1 HDFS的基本架构 2.1.1 HDFS各组件的功能: 2.2 HFDFS....
回顾昨日A股行情,三大指数早间高开高走,深成指、创业板指双双涨超1.5%,沪指跟随上行。午后指数高位盘整,盘中三大指数集....
前面我们在windows下安装了zookeeper服务器,那么在Linux下如何安装zookeeper服务器呢? 大体一致,直接上干货!! window下....
Apache Dubbo概述 1、Dubbo简介1.0 什么是RPC1.1 Dubbo核心能力1.2一站式微服务解决方案 2、服务发现3、部署架构3.1注册中....
本文提供一些我在安装Sonarqube过程中遇到的一些问题的解决方案,如果想对sonar或具体的配置过程有更多的了解,请参考这篇文....
一,内存模型 Spark的内存模型如下图所示: Reserved Memory 固定为 300MB,不受开发者控制,是启动Spark框架本身所需要的....
hadoop fs [generic options] hadoop fs -rm -f /tmp/luan/ 删除文件文件,不能删除目录 -------------------....
代码如下所示: public class KafkaToHive { public static void main(String[] args) { StreamExecutionEnvironm....
Springboot搭配ElasticSearch常用api ElasticSearch是什么 Elasticsearch (ES)是一个基于Lucene构建的开源、分布式、RESTfu....
首先 map task 写一个 继承Mapper 的类; 中间可能写一个 分文件的一个partition 的类;(注意设置 reducetask 的数量) ....
GC是jvm自动完成的,是根据jvm系统环境而定的。大致上来说,满足以下四个条件之一就会触发jvm垃圾回收。 1、当Eden区或者S区....
报错的原因是因为某一天集群切换ups电源时,出现了断电。重启集群后写parquet文件就会出现不成功。 空文件和少量文件写parqu....
Hadoop学习笔记(8)–hbase搭建 一、文件解压 cd /opt/module/tar -zxvf hbase-2.2.0-bin.tar.gz 二、修改启动变量 系统环....
系统版本 centos stream 8 过程很曲折: 1、yum install fping 报错 注释掉failover那段,报错消失,但是依然找不到fping的....