大数据知识_大数据学习笔记

1.解压 命名 tar -zxvf sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz mv sqoop-1.4.7.b....

网页右边，向下滑有目录索引，可以根据标题跳转到你想看的内容如果右边没有就找找左边 此文是学习尚硅谷Elasticsearch课程的....

测试代码 public static void main(String[] args) { DefaultMQPushConsumer consumer = new DefaultMQPushConsumer(....

尚硅谷数仓虚拟机镜像 博主通过学习尚硅谷数仓项目，将部署好的数仓虚拟机打包成ovf文件，由于博主电脑内存较小，博主使用了....

安装 下载地址 https://www.rabbitmq.com/download.html 基于Docker安装就特别简单了，就不做演示了 复制下面你的代码即可....

1、需求来源 自上而下：公司策略、大方向等 自下而上：产品想法、用户需求等 生存防守： 创业、转型、融资等 2、需求分析：K....

先看看最基础的sparkSQL，创建简单RDD然后过滤 val sparkConf: SparkConf = new SparkConf().setAppName("BookCarCard") ....

1.消息消费两种方式 推的模式:MQ 主动将消息推送给消费者,消费者设置一个缓存区去消费消息,这种效率高,也是主要采用的方式拉....

目录 数据库介绍 数据库的发展史 DBMS 数据库管理系统 数据库管理系统的优点 数据库管理系统的基本功能 数据库系统的架构 各....

阅读本文大约需要3分钟 主要内容：数据分析。 适用人群：Python初学者，数据分析师，或有志从事数据分析工作的人员。 准备....

编 辑：彭文华 来 源：大数据架构师（ID：bigdata_arch） 彭友们好，我是你的老朋友。最近一直在研究数字化转型和数据管理....

对于推荐来说，用户-商品图的表示学习已经从使用单个ID或交互历史发展到利用高阶邻居，这导致了图卷积网络(GCNs)的成功推荐....

上一篇了解啦Java相关历史，这篇就来介绍下Java的应用领域。基本上来学Java的朋友都会关心Java学有所有所成之后能做什么，这....

首先我们了解数字化，数字化主要包含大数据、云计算、人工智能以及区块链技术。通常称为ABCD，即A——Aritificial Intellige....

以区块链全生命周期管理为脉络，基于区块链防篡改、防抵赖、隐私保护、可追溯等特性，创建企业数据上链+个人链上使用+全程追....

今天项目中用到了kafka做用户行为的数据埋点，重新熟悉了一下kafka 1. 消息中间件对比 kafka: 追求高吞吐量，适合产生大量....

1、下载 下载地址：https://www.oracle.com/java/technologies/downloads/#java8 2、解压 tar xzvf jdk-8u311-linux-x64.ta....

简介 GBase 8a集群支持从HDFS上加载数据和将数据导出到HDFS上，本文继续对HDFS相关问题的分析排查进行介绍。 检查HDFS服务器....

安装thrift wget https://mirrors.cnnic.cn/apache/thrift/0.19.0/thrift-0.12.0.tar.gztar -zxvf thrift-0.12.0.tar.gzcd t....

源码分析之消息消费 Rebalance（针对集群消费模式） （1）消费Group下的所有消费者 （2）Topic的所有Queue队列 （3）Queue分....