大数据知识_大数据学习笔记

我这里的spark部署在虚拟机内，使用的版本为： python3.8hadoop3.3spark3.2java8 为了防止报错，在windows环境我也安装了pyt....

Kafka的Java客户端-demo版 0. 订单类 package com.hao.entity;public class Order { private Long orderId; private i....

金三银四到了~ 这几天，后台给我留言问简历、Offer的人，一下子多了起来。 不过，我看了很多小伙伴的履历，发现：大部分人的....

Spark 本地安装(MAC OS) 1.安装Java 前往JAVA Downloads下载合适Java版本MAC JAVA 安装流程在命令行中输入 java -version测....

1.虚拟机搭建部分 root登录 ip addr 查看当前的IP地址 2.克隆虚拟机（集群） 基础设置 vi /....

大数据之Spark框架中RDD和DataFrame的区别是什么？RDD（提供了一种高度受限的共享内存模型； DataFrame是一种分布式的数据集....

代码块 StreamExecutionEnvironment env = StreamExecutionEnvironment.getExecutionEnvironment(); StreamTableEnv....

元宇宙世界充满了神秘与未知，等待着勇敢者去逐一探索与发现。时值本体完成 EVM 集成，成为支持虚拟机数最多的公链平台之际....

1、检索案例—— SearchRequest searchRequest = new SearchR

每天天都在努力学习的我们 前言         本篇博客讲解的内容依旧是使用Spark进行相关的数据分析，按理来说数据分析....

文章目录 方法1(n)方法2(n)方法3(n)方法4(n)方法5(y) 环境:spark2.4.8 方法1(n) 按官方文档上来说只需要修改spark运行环....

目 录 项目实战——将Hive表的数据直接导入ElasticSearch   此篇文章不用写代码，简单粗暴，但是相对没有那么灵活；底层....

因为一些原因，要清点一下线上hive事务表有多少 几千个表一个个去看得累死人 灵机一动可以通过元数据来查嘛 这里记录一下： ....

本篇博客主要分享通过kafkaStream处理过的数据发送到doris如何处理数据顺序问题 业务场景: 实时统计快递订单及时揽收率并录....

什么是Stader ？ 大家好我是肥肥啊！今天来跟大家聊一聊Stader。Stader的愿景是帮助网络用户通过其平台方便、安全地质押他们....

zookeeper下载地址 tickTime=2000initLimit=10syncLimit=5dataDir=/Users/yangyijun/workspace/soft/zkcluster/zk1/dataclie....

什么是Nosql 泛指非关系型数据库的，随着web2.0互联网的诞生！传统的关系型数据库很难对付web2.0时代！尤其是超大规模的高并....

商场如战场，得用户者得天下，谁能成功将用户留下来，谁就掌握了高速增长的财富密码。 建立优质的用户体验，赢取市场的长久....

1. 安装RabbitMQ 直接使用docker镜像安装RabbitMQ即可。 docker search RabbitMQ 直接选择stars最多的，同时也是最新版本的....

maven中dependencyManagement标签的继承性以及使用scope=import进行多继承 maven中dependencyManagement标签的继承性以及使....