
Spark运行架构 Spark 架构的核心是一个计算引擎,整体来说,它采用了标准的master-slave的结构 Driver—>master Executor->s....
zookeeper 的特性及其利用场景(分布式锁 和 Master选举) zookeeper 的数据结构 Zookeeper 的数据模型和分布式文件系统类似....
1.单生产单消费 方案思路: 完成 Topic 元数据的迁移。生产者停止向旧kafka集群发送消息。修改生产者配置后,生产者切到新k....
消息队列 作用 1.异步处理(无需同步阻塞,给予用户体验) 2.应用解耦(远程调用一方改变接口,另一微服务必须同时改写源代....
这个是大数据测试系列第二章,点击查看第一章 什么是数据仓 是BI(商业智能)、报表和数据挖掘等应用的基础 大量的数据集....
安装和配置的过程省略。 简单的使用: 1.创建配置类(消费者和生产者都需要): @Configurationpublic class Ra
开窗函数:定义一个行为列,在查询结果上直接新增一列窗口函数值,开窗函数的特征是带有over()。开窗函数从使用目的上可以分....
大数据技术生态 本文主要抄录《大数据测试技术与实践》 由下而上可以划分为: 数据采集 关系与非关系数据采集组件,分....
2021年全球网络市场规模为542.4亿美元,与去年相比增长10.1%,其中交换机、路由器和WLAN市场均有稳固增长,增速分别为9.7%、....
配置集群:主机master、从机s1、s2 `` `一、安装hadoop 需要的文件 VMware Xshell jdk 1.8.0_171 CentOS-7-x86_64-DVD-2003.....
Zipkinjaegerelastic apmSkyWalkingPinpoint简介Zipkin早于Jaeger,是Google Dapper的开源版本,由Twitter进一步开发。Zipki....
隔夜加密市场继续下行。大饼(BTC)一度跌破35k一线,目前暂时稳在35k上方。 前几天,投资机构Paradigm在官网发表了一篇研究....
初识 Elasticsearch 一、Elasticsearch 简介二、Elastic Stack三、Elasticsearch 高级特性四、Elasticsearch 安装部署五、Sp....
参数检验、非参数检验、方差分析 1.导语2.参数检验2.1 数据分布2.1.1 正态分布1.有总体数据2.没有总体数据,用样本3.统计参....
这是由于Hadoop中的jar包和HBase中的包版本不一致导致的 报错中已经写清楚两个包的具体路径了 只需要把其中一个包修改后缀....
该教程主要分为 三篇文章。此为第一篇——主要介绍 ElasticSearch、Kibana 的安装 以及如何 通过 Http 和Java API的方式使用....
1.我们上次学到的都是内部表,必须在数据库内进行使用。今天我们学习建外表操作: (1)在hdfs上创建一个空目录:hdfs dfs -....
报错日志: org.springframework.dao.TransientDataAccessResourceException: Error attempting to get column 'birthd....
方式一:1. 创建新索引 PUT test.project.20220507{ "mappings":{ "properties":{ "code":{ ....