大数据知识_大数据学习笔记

hive数据库优化： 1、尽可能多的过滤掉不需要的数据内容 2、调整表格的存储格式 3、调整表格的map数量 4、调整reduce的数量 ....

编排文件3个 jobmanager-deployment.yaml apiVersion: apps/v1kind: Deploymentmetadata: name: flink-jobmanager namespa....

在大学扩招、大学生贬值、经济下行、就业困难的多重压力之下，大学生竞争压力越来越大。2021年的大学生毕业生人数高达909万....

文章目录 KNN算法原理一、KNN分类算法二、三个问题1.K值如何选取2.距离如何度量特征归一化4. KNN优缺点 三、RDD Flow KNN....

近几年，伴随云计算、容器技术以及 DevOps 的普及，DevSecOps 作为糅合了开发、安全及运营理念的全新方法，其关注热度持续上....

安装RabbitMq 安装依赖环境C++编译 yum -y install make gcc gcc-c++ kernel-devel m4 ncurses-devel openssl-devel uni....

文章目录 一、 智能维护技术引述1.智能维护技术的发展与问题（PHM技术产生的背景）2. PHM概念与方法论2.1 PHM概念2.2 MTBD(M....

一、创建NameServerController，NameServerController为nameserver的核心控制器 点击进入createNamesevController(arg)方法....

目录 1.排序概述 2.WritableConparable排序案例实操 2.1需求 2.2 需求分析 2.3 数据准备 2.3代码实现 3.结果展示 1.排序概述....

KYLIN_HOME is set to /home/lqs/module/kylin 原因 是因为您没有在您的环境变量里面配置kylin的环境变量，去配置好就可以了....

Kafka手动删除主题 主题的元数据存储在Zookeeper中的/brokes/topics/ 和/config/topics路径下，主题中的消息数据存储在log.d....

随着数字化转型的不断深入，各行各业开始重视数字化建设，从粗放式转向精细化的经营管理，但由于在此过程中缺乏顶层设计，形....

文章目录 Redis哨兵模式原理工作原理如何判断master宕机主观下线（SDOWN）客观下线（ODOWN） 哨兵leader选举选举原理选举....

1.区块链是什么 区块链：分布式数据存储、点对点传输、共识机制、加密算法等计算机技术的新型应用模式。 本质上是一个去中心....

【若泽大数据005】HDFS基础Shell操作 1、格式 使用hadoop bin目录的hdfs命令，后面指定dfs，表示是操作分布式文件系统的，....

Java 一面基本上都是基础题，同样是 CURD 的活，谁更熟练要谁，比如下面这些面试题，八股文越熟练越容易通过 Java 面试。 下....

近日，杭州远景艺术与浙江爱签数字科技有限公司达成了合作，通过引入爱签区块链电子合同，用科技赋能艺术教育行业，共同营造....

本文基于hadoop-3.3.0 目录 1 概述 2 注册过程 2.1 注册前置过程 2.2 注册过程 2.3 心跳发送 1 概述 dn在完成启动（源码阅读....

RDD困境        map、filter，它们都需要一个辅助函数 f 来作为形参，通过调用 map(f)、filter(f) 才能完成计算。以 map....

近年的大环境加上疫情的局势，沿海地区可能经感受到，跨境电商越来越火。但是还有很多人不知道亚马逊，或者是不知道亚马逊开....