大数据系统知识_大数据系统学习笔记

背景 启动hadoop集群时，在NameNode与SecondaryNode成功启动的同时，DataNode启动失败，本文章将持续更新，总结DataNode节点....

前段时间，笔者在超市购买酸奶时，目睹了这样一件事： 一名年轻的消费者拿起一瓶包装简洁的酸奶想要放进购物篮，而在她旁边....

Build-in 内置函数 官网 https://cwiki.apache.org/confluence/display/Hive/Home DML/Operators and UDFs 一些常用内置UDF....

在测试代码中发现taildir不支持windows。且要上传很多小文件并记录文件名字。 使其支持windows很多大佬已经做到，我也是站在....

文章目录 1. 阻塞队列2. Kafka入门2.1 Kafka术语解释2.2 Windows下修改配置2.3 Windows下使用Kafka 3. Spring整合Kafka4. ....

【README】 本文diy代码实现了 spring 依赖注入，一定程度上揭示了依赖注入原理； 【1】控制反转-Inversion of Control 是一....

文章目录 第一部分第1章 可靠、可扩展与可维护的应用系统第2章 数据模型与查询语言关系模型与文档模型数据查询语言图状数据....

2021年，对于互联网行业来说倍感交集。 这一年，政策监管席卷了各个领域，互联网行业也身处风眼中心，互联网基本面增速放缓....

生产环境ELK记录的报错信息： ERROR c.x.c.d.b.s.i.TableWarnServiceImpl - executeTableWarnJob error: java.lang.NumberFo....

1、1 在使用 RabbitMQ 的时候，作为消息发送方希望杜绝任何消息丢失或者投递失败场景。RabbitMQ 为我们提供了两种方式用来控....

2021 年最后一天，津津乐道的第一轮融资已经 close，融资金额不多，但也足以让大家不用担心我们倒闭了，也让我们有胆量在 20....

presto中生成split的基本原理是：      1. presto先扫描所有所有需要访问的hdfs的数据文件，如果hdfs文件比hive.max-spli....

区块链的去中心化后，没有那种中心数据库了吗？没有中心数据库了数据存在哪里呢？难道要存在每一台个人机中，数据量岂不是太....

来源丨Grayscale 编译丨Ning 去中心化金融（DeFi）是一种冉冉升起的新兴加密货币创新，它打破了银行和边界的桎梏，创造了全....

##completion suggest搜索推荐，自动提示##索引PUT blog_01{ "mappings": { "properties": { "name":{ "typ....

1.下载解压 wget https://github.com/lmenezes/cerebro/releases/download/v0.9.4/cerebro-0.9.4.tgztar -zxvf cerebro-0.9.....

问题描述 在运行MapReduce程序中把报错如下： java.lang.Exception: java.lang.NullPointerExceptionat org.apache.hadoop.m....

大数据-玩转数据-hive的安装 一、说明： 本文以mysql安装hive为例，前提是已经部署好好JDK、hadoop、mysql。并且创建了hive....

1、消费方式        consumer采用pull（拉）的模式从broker中获取数据，pull的优势是可以根据消费者自身的消费能力获....

#项目运行端口配置server: # 端口号 port: 8081spring: # 数据源配置 datasource: username: 数据库用户名 pass....