
12月23日,Regional trees主链开始进行测试。公链的核心在于公开(Public)和无需许可,这种区块链的优点是用户可以在链上创....
2021SC@SDUSC 总结: 通过一学期的代码分析,首先如期完成了小组的任务:对Spark的SQL部分进行代码分析与解读,....
2021SC@SDUSC 概述 本次继续分析pig作为hadoop的轻量级脚本语言操作hadoop的executionengine包下的MRUtil类的代码。 静态方....
用户并发量的情况,可以延时2分钟给用户发短信 先来看看Redis实现普通的消息队列 ========================================....
压缩的好处:1,就是节省磁盘空间,提升磁盘利用率。2,加速网络的传输。 压缩的缺点:1,需要占用cpu资源进行压缩与解压。2....
原创作者:运维工程师 谢晋 ELK+Filebeat+Redis部署应用指导书(一) 概述ElasticStack平台简介ElasticStack体系架构系统....
一、4040端口 spark任务运行后,会将Driver所在机器绑定到4040端口,提供当前任务的监控页面。 此端口号默认为4040,展示信....
文章目录 1 布隆过滤器(Bloom Filter)1.1 基本原理1.2 误判率及相关计算1.3 BF的改进:counting bloom filter1.4 应用 2....
从2019年国内湖北武汉的新冠病毒的首次发现到2021年奥密克戎,病毒从Alpha、Beta、Gamma、Delta、Omicron,发生了五次变异,....
问题描述 做大数据存储实验的时候用hbase的shell命令结果出现报错,Connection closed 查看日志发现报错服务不存在 最终解....
我们通常使用的DefaultMQPushConsumer是通过推拉两种模式结合的长轮询机制去进行工作的,消费者通过这种机制对消息进行消费....
1、 zookeeper.sh安装脚本 #!/bin/bashecho "install zookeeper 3.5.7 ==========="#进入安装包路径function cd_opt(){ ....
一、MapReduce 简介 1.1 MapReduce的概述 在Hadoop生态圈中,MapReduce属于核心,负责进行分布式计算。 MapReduce 核心功能....
目录 一、系统内置函数 二、常用内置函数 1.空字段赋值 2.case语句 3.行转列 4.列转行 5.窗口函数 RANK函数 6.自定义函数以....
今天给大家分享一款数据编排工具,名字叫做Alluxio,不知道大家有没有听过? 说句实话,我还是第一次听说有这款软件存在,虽....
EFK是ELK日志监控架构中一个较为简单的、轻量级的日志监控框架,主要使用到了Filebeat 、Elasticsearch以及Kibana。Filebeat....
新冠变异病毒奥密克戎的出现,让全球供应链或产业链中断、停滞,业内人士预计欧美疫情带来的滞胀将会延续到明年上半年,所有....
1.确保基础环境配置成功才开始接下来的操作 一.NoSQL的安装(安装Redis和Memcached) 1.安装Redis yum install epel-release ....
一般来说,以事件时间为时间语义,如果一个时间流不按事件时间递增的顺序到达Flink作业中,则称此流数据为乱序(out-of-orde....
Windows搭建后台的软件架构,涉及到部分软件要提前安装,安装之后最后都为/bin文件夹设置一下环境变量方便命令执行: 安装软....