大数据知识_大数据学习笔记

地图之家总目录（订阅之前请先查看该博客） 地图之家：cesium+leaflet+echart+地图数据+地图工具等相关内容的介绍 文章末尾....

本文分享自华为云社区《企业数字化转型方式方法的探讨》，作者： Uncle_Tom 。 1. 数字经济和数字化转型 1.1. 数字经济成为....

什么是分布式锁？实现分布式锁的常用三种方式 在很多场景中，我们为了保证数据的最终一致性，需要很多的技术方案来支持，比....

如果说鸿蒙“发布”是万里长征的前半段，相信华为已经走完，但在后半段–生态养成，鸿蒙的隐忧是不少的！ 从那天起，兴龙也....

目录 Atlas界面操作 一、查看同步过来的Hive表 二、 查看表的properties: 三、查看表的Lineage,这里首次导入看不到血缘关系....

哈喽！大家好，我是小奇，一位不靠谱的程序员 小奇打算以轻松幽默的对话方式来分享一些技术，如果你觉得通过小奇的文章学到....

我们知道，limit分页，当翻到比较靠后的页时，查询效率会越来越慢。如这则帖子所述： 浅谈PageHelper插件分页实现原理及大数....

文章目录 1、通用优化策略1.1 通用最小化法则1.2 职责单一原则1.3 其他 2、写性能调优2.1 基本原则2.2 优化手段2.2.1 增加 ....

模块B离线数据抽取 任务简介具体步骤简介第一步：开启动态分区第二步：提取前一天时间第三步：读取MYSQL数据第四步：全量写....

前言： 本次项目实现了一个轻量级的RPC分布式网络通信框架，因此写下本篇文章梳理一下该框架的实现逻辑和相关知识点。文章中....

目录 一、API 的状态二、API 价值链三、API 挑战四、安全和访问控制五、可靠性和性能六、可见性和治理七、什么是 API 网关？....

1. 概述 MQ(Message Quene) : 翻译为消息队列,通过典型的生产者和消费者模型,生产者不断向消息队列中生产消息，消费者不断的....

背景 最近 公司组织架构调整，我也被调整到了 数据中台组，刚好最近分配到一个需求任务，这个任务其实也很简单，就是公司的B....

Hadoop是一个由Apache基金会所开发的分布式系统基础架构，一个能够对大量数据进行分布式处理的软件框架； Hadoop以一种可靠....

开篇三连问!· 你觉得视频终端只能开视频会议，并一定要复杂的有线连接吗?· 你觉得视频终端和智能化应用不靠边，终端外形跟....

摘要Spark Streaming是一套优秀的实时计算框架。其良好的可扩展性、高吞吐量以及容错机制能够满足我们很多的场景应用。本篇....

需求场景：我们的产品需要与客户的权限系统对接，即在登录时使用客户的认证系统进行认证。集成认证的方式是调用客户提供的ja....

一个新的项目旨在为实时处理开发一种速度更快的框架，可用来支持用Python编写的机器学习应用。加州大学伯克利分校实时智能安....

这一个月我都干了些什么……工作上，还是一如既往的写bug并不亦乐乎的修bug。学习上，最近看了一些非专业书籍，写点小感悟，....

随着对spark的业务更深入，对spark的了解也越多，然而目前还处于知道的越多，不知道的更多阶段，当然这也是成长最快的阶段。....