大数据知识_大数据学习笔记

摘要：采用多主实例模式的HA方案，不仅可以规避主备切换服务中断的问题，实现服务不中断或少中断，还可以通过横向扩展集群来....

Python使用 Delta Lake 今天我们看一下如何在Python 中使用 Delta Lake，毕竟现在很多人开发Spark任务是通过Python而不是sca....

目录 电商常识实时数仓架构对所用到的表进行解析完成数据源和数据采集完成ODS层完成DIM层分析表结构使用代码导入数据并check....

HDFS常用命令 配置用户环境变量 vi .bashrc export HADOOP_HOEM=/home/gulyas/app/hadoopexport PATH=$HADOOP/bin:$HADOO....

金融风控介绍 最开始的信贷风控是怎么做的？ 人审吃业务经验不能大批量处理，效率低下不适用于移动互联网时代的金融场景建模....

spring官网地址Elastics earch 的官方地址： https://www.elastic.co/cn/数据类型种类 结构化数据：数据库mysql 非结构化....

Python使用 Delta Lake 今天我们看一下如何在Python 中使用 Delta Lake，毕竟现在很多人开发Spark任务是通过Python而不是sca....

3台服务器，NameNode、YARN分别在2台华为云上，SecondaryNameNode在阿里云上。 群起集群后发现，SecondaryNameNode启动失败....

链路追踪之前了解一点，大概就是traceId,spanId,parentId等等，traceId标识一次请求，spranId标识链路中的一个节点，parentI....

一段非常长的数据，第一个是加密后的用户信息，后面依次是开始时间，结束时间，区县编码，经度，纬度.... 现在我希望创建一....

建表格式 (1).用户资料表(mp_user)字段字段描述字段类型user_id用户ID Stringuser_name用户姓名 Stringuser_status用户状....

连接方式： 使用mysql客户端连接，包括但不限于： cmd连接：mysql -h127.0.0.1 -P9030 -uroot； Navicat、Datagrip等工具，D....

Shuffle 洗牌 Map阶段处理的数据如何传递给reduce阶段，shuffle在其中起到了很关键的作用，shuffle分布在MapReduce的map阶段....

Spark封装SQL作业 SQL ON HADOOP 1. SparkSessionhive 支持 能够去操作Hive对应的Metastrore里面的数据spark.sql(......)Thr....

作者 | 宋慧 出品 | CSDN 云计算 疫情之后，一切都在“内卷”，HR 也逃不过。初创公司想要招到优秀人才，除了对市场和未来....

一.产生背景 实时流数据增多 : 互联网应用快速发展,实时流数据日益增多价值更大: 实时流数据的处理和挖掘带来的价值比离线数....

题目描述 解题思路 思路很简单，就是二维数组或者结构体数组存储两个稀疏向量，然后找相同的index,求value积之和即可 错....

今天给大家准备了30张精美、酷炫且非常实用的可视化大屏模板，涉及大制造、地产、供应链、物流、银行、酒店等10多个行业。获....

在执行Druid之前需要先导入druid的jar包以及JDBCUtils需要的配置文件 配置文件如下： driverClassName=com.mysql.jdbc.Dri....

首先 我们在学习 RabbitMQ 的时候肯定会需要用到集群的，那么如何去搭建这个集群呢？这边提供一种 一主一从 的搭建方案，其....