大数据知识_大数据学习笔记

一、为什么要设计宽窄依赖 对于窄依赖，Spark可以并行计算。如果有一个分区数据丢失，只需要从父RDD的对应1个分区重新计算即....

目录 1：什么是数据库 2：什么是关系型数据库 3：常见关系型数据库 4：什么是非关系型数据库 5：非关系型数据有哪些？ 1：....

什么是数据安全?数据安全有两个含义：一是数据本身的安全，主要是指利用现代密码算法积极保护数据，如数据保密、数据完整性....

public Response> fieldValueFactor(String query) { // query MultiMatchQueryBuilder multiMatchQueryBuild....

1 启动流程 首先看下 namesrv 模块下的结构，结构比较简单，只存在 config、processor、routeinfo 三个包再加上 namesrv控制....

二级索引分类 Phoneix的索引底层还是表现为HBase中的表结构(每建一个索引就回增加一个表),这些索引表专门用来加速查询速度.....

1 拉取代码 首先从 git 仓库中获取 rocketmq 源码，然后切换分支到 4.3 2 编译项目 在根目录下，将 pom 文件中的插件进行删....

2021SC@SDUSC 山大软工实践hive(9)-dispatch关于minCost的计算 文章目录 山大软工实践hive(9)-dispatch关于minCost的计算从....

文章较长，建议先收藏再看 文章目录 一、创建 BrokerController1.1 初始化核心配置类1.2.加载配置文件信息到配置类1.3 设置....

Spark的核心是根据RDD来实现的，Spark Scheduler则为Spark核心实现的重要一环，其作用就是任务调度。Spark的任务调度就是如....

双11落幕之后，一年两度的手机换新潮也随之过去。截至11月12日的京东双11自营手机销量榜显示，仅iPhone12+iPhone13就售出了....

有效的数据分析背后，离不开数据分析工具的支持。面对市场上眼花缭乱的数据分析工具，企业应该如何选择?除了看自己的需求，....

大数据可视化利用leaftjs webgis实现风场可视化、洋流可视化、百度地图、高德地图、谷歌地图、openstreet、arcgis地图、卫星....

MapReduce总结 前言 MapReduce是一个分布式计算的框架，由Google在2004年的论文中发表，之前已经对该论文进行了翻译工作，这....

目录 引言一、ELK 日志分析系统简介1. 日志服务器2. ELK 是什么3. Logstash 四种工具4. 日志处理步骤 二、Elasticsearch 的....

###查看es版本GET http://172.16.101.102:9200?pretty### 查看索引mappingget http://172.16.101.102:9200/godproduct/prod....

一、Kubernetes(k8s)基本概念 是Google开源的一个容器编排引擎，用于自动化容器化应用程序的部署、规划、扩展和管理，它将....

“参会中美企业表示，愿意借助相关平台，进一步扩宽美国市场和拓展商机渠道。此次活动旨在促进中美跨境电商交流合作，支持和....

全球及中国多晶透明陶瓷行业供需及竞争形势分析报告2021～2026年  ************************************** 【报告编号】: ....