大数据知识_大数据学习笔记

说明：整理博主用Java API实现HDFS操作时遇到的问题 问题 为搭建分布式操作环境–在ubuntu16中安装IDEA2021、tomcat9.0、ha....

感谢博主：解决Hbase数据更新Phoenix对应索引表不更新问题_高矮-CSDN博客 问题描述：         首先感谢上面博主老师....

ElasticSearch——倒排索引和正向索引 1、正向索引 正向索引 (forward index) 以文档的ID为关键字，表中记录文档中每个字的....

配置： server: port: 8080spring: rabbitmq:# 单机连接配置host port即可# host: 192.168.50.134# port: 5672# ....

一、获取pull镜像 docker pull apache/skywalking-oap-server:7.0.0-es7 docker pull apache/skywalking-ui:7.0.0   二、安....

kafka协议 在服务端的介绍中，首先了解下kafka协议。掌握协议不会对日常使用有太大的帮助，但是做到心中有数可以帮助我更好....

官网 https://www.elastic.co/guide/cn/elasticsearch/guide/current/_search_lite.html 注意的地方 有时候没有代码提示，是....

Ububtu18.04安装Hadoop3.1.3全分布集群 摘要Ububtu18.04安装1.选择NAT网络2.关闭防火墙3.SSH连接4.配置静态IP4.使用hadoop用....

Hadoop默认不支持lzo压缩，需要配置 hadoop配置lzo压缩 lzo的jar 链接：https://pan.baidu.com/s/1l1Qc69WebN1HCf1VlQeOXQ ....

世界上并没有完美的程序，但是我们并不因此而沮丧，因为写程序就是一个不断追求完美的过程。 问：avg有什么特点？ 答： 问....

基于派生表的查询 子查询不仅可以出现在WHERe子句中，还可以出现在FROM子句中，此时子查询生成的临时派生表成为主查询....

存储：缓存数据库 关系性数据库 文档型数据库 1.数据访问层选型 所有的数据访问框架都是在解决如下两个问题 a.数据库连接如....

所需脚本网址 jqop https://blog.csdn.net/qq_51903852/article/details/121120429 xsync https://blog.csdn.net/qq_5190385....

近日，大数据产业创新服务媒体数据猿重磅发布了“2021企业数智化转型升级服务全景图/产业图谱1.0版”，以行业视角盘点国内数....

执行形如下列的spark sql： select xxx from TABLENAME WHERe x=1 having CONDITION = 1 报错： org.apache.....

0、为啥学习ES 在公司开发一段时间以来，我一直对公司提供的统一日志平台很感兴趣。在容器化部署项目时，我们都没有关心过日....

官网地址：Apache Kafka 概念 Kafka Connect 是一款可扩展并且可靠地在 Apache Kafka 和其他系统之间进行数据传输的工具。 ....

错误日志 2021-11-04 21:27:35,794 INFO org.apache.hadoop.service.AbstractService: Service org.apache.hadoop.mapreduce....

Hbase的伪分布部署的前提是拥有一个伪分布式的Hadoop部署，且进程都存在，zookeeper使用自带的实例，下一章Hbase完全分布的....

在实际应用中难免会遇到多个流或批处理程序需要同时操作同一张Hudi表的场景，默认情况下多个程序往同一张Hudi表中写数据时会....