大数据知识_大数据学习笔记

1、[root@192 ~]# docker images 查看镜像 2、使用docker pull rabbitmq:management 拉取镜像 3、运行 [root@192 ~]# dock....

最近开始接触到一些IoT相关的内容，国内也有不少公司与学校在关注相关内容，在目前平台互联网发展已经成熟的阶段，工业互联....

文章目录 RabbitMQ——RabbitMQ的HelloWorld消息模型（直连）1、HelloWorld消息模型之发布者发布消息2、HelloWorld消息模型....

文章目录 写在前面1. 介绍1.1 什么是MQ1.2 什么是RabbitMQ1.3 AMQP 协议 2. Go语言操作RabbitMQ2.1 下载2.2 引入驱动2.3 He....

概览 Kafka Connect 是一种用于在 Apache Kafka 和其他系统之间可扩展且可靠地流式传输数据的工具。 它使快速定义将大量数据....

这里写目录标题 连续分配管理方式单一连续存储管理分区式存储管理固定分区动态分区 伙伴系统内存紧缩（内存碎片化处理)覆....

用户画像建模 — 用户定量画像 定量画像包括：用户基础变量、兴趣偏好等可量化的数据特征用户画像的颗粒度：即用户画像应该....

1.背景 启动脚本大致内容如下： 直接sh 执行这个脚本能正常拉起 但crontab -e配置这个脚本定时执行后报下面的错误： 2.原....

前言 Python又一次拿到了TIBOE的“年度编程语言”头衔，成为2021年最受欢迎的的编程语言。 Python之所以有这么高的热度和排....

目录 UDF GenericUDF Java开发转了大数据，竟然被拉去做了非结构的ETL抽取，真的是比做后端伤脑筋，没有可借鉴的框架，只能....

1. DataX 是阿里巴巴开源的一个异构数据源离线同步工具，致力于实现包括关系型数据库(MySQL、Oracle 等)、HDFS、Hive、ODPS....

一、CAP理论与BASE理论： 1、什么是 CAP 理论： C：Consistency 一致性：指强一致性，分布式系统中的所有节点在同一时刻具....

本节内容 搭建SpringCloudStream发送消息接收消息案例 项目搭建 pom org.springframework.cloudspring-cloud-starter-stream....

Netty 四 RPC基本介绍 RPC基本介绍 RPC(Remote Procedure Call 远程过程调用)是一个计算机通信协议. 用于在一个程序调用执行....

延时队列 需求描述 场景一 在淘宝下了订单,过半个小时未支付就取消订单 场景二 还是淘宝(别问,问就是淘宝资深剁手党),发货后....

val df = Seq( (9999,22) ,(8888,22) ).toDF("col2","col1") df.write.mode(SaveMode.Append).insertInto("....

今天看书的时候，书中写到了到了RocketMQ的消息发送的流程解析，特此做个笔记     先说说RocketMQ 的消息发送方式    ....

第一章：云计算概述 1.1什么是云计算 1.1.1云计算的定义 1.定义：云计算是基于互联网服务的增加、使用和交付模式，通常涉及....

Web3，正在成为越来越多硅谷科学家的职业新选择。 1月7日，Twitter Spaces首席数据科学家Julien Gaillard宣布将加入DeFi借贷....

hive数据分析 1、创建表 CREATE TABLE law ( ip bigint, area int,ie_proxy string, ie_type string ,userid string,client....