大数据知识_大数据学习笔记

Zookeeper zookeeper文件目录 bin conf zoo.cfg配置文件 myzkData myid身份标志 …等等 选举机制 出现以....

什么是Data lineage？ 在大数据时代，系统的数据来源广泛，各种类型的数据快速产生且爆发性增长。从数据的产生、ETL 、数据....

Crypto量化交易数据 数据格式数据获取API 数据格式 没有标准化，各个交易所的格式五花八门，破烂流丢。而不像成熟交易所和券....

Flink DataStream 模板 package org.example.scalaimport org.apache.flink.api.java.ExecutionEnvironmentimport org.apach....

编译安装hadoop-2.7.5 源码包下载地址：hadoop-2.7.5-src.tar.gz 配置JDK环境 Linux配置JDK环境安装maven 下载地址：maven m....

2021年，我们见证了加密市场的快节奏，整个加密领域风起云涌，短期内引爆了整个市场，但随着一个个项目的过度开采，偷池，跑....

Hadoop运行环境搭建 1、模板虚拟机环境准备 安装模板虚拟机，IP地址192.168.10.100、主机名称hadoop100、内存4G、硬盘50G ....

目录 1.部署Nginx docker pull nginx # 我这里就默认下最新的，不指定版本docker images # 检查有没有下好# -d后台....

java api 操作 hbase （主要批量存放数据）操作步骤如下：#创建配置对象，创建连接对象Configuration config = HBaseConfigu....

【答案】 数据：是数据库中存储的基本对象，是描述事物的符号记录数据库：是永久存储在计算机内的，有组织的、可共享的大量....

本文首发于微信公众号“Shopee技术团队”。 摘要 Apache Druid 是一款高性能的开源时序数据库，它适用于交互式体验的低延....

对于数据分析来说，在构造或载入数据后最基本的操作应该就是对数据的访问了。看一看数据的结构、组成、分布等，根据需要从数....

在工业4.0时代，各种智能制造系统推陈出新，边界不断扩大，合作与竞争并存。MES系统作为重要的参与者，也超越了个人和组织的....

（一）概述 SparkSQL可以理解为在原生的RDD上做的一层封装，通过SparkSQL可以在scala和java中写SQL语句，并将结果作为Datase....

一、RabbitMQ如何保证消息的可靠性传输？ 1.使用事务消息 通过对信道的设置实现： //通知服务器开启事务模式，服务端会返回T....

在Flink流式程序设计中，经常需要与外部系统进行交互，很多时候外部系统的性能会成为任务整体吞吐的瓶颈，通常的解决方案会....

目录 1、Zookeeper简介2、Zookeeper的一致性3、Paxos 算法3.1、Paxos 与拜占庭将军问题3.2、算法描述3.2.1、三种角色3.2.2、....

可以的！ 消费者和生产者使用相同的参数声明队列就可以，重复声明不会改变队列，谁先生效就用谁。 channel.queueDeclare(QUE....

前面的章节虽然完成了服务的注册以及相互间的调用，但是调用方发起调用时，还是硬编码的形式，如果服务比较多，代码不好管理....

@Beanpublic void getProperties() {String