大数据系统知识_大数据系统学习笔记

导读：本文简单介绍Greenplum具备的特性。 作者：王春波 来源：大数据DT（ID：hzdashuju） 01 开放源代码 Greenplum数据库....

1、启动报错 yum install centos-release-glusteryum install -y glusterfs glusterfs-server glusterfs-fuse glusterfs-rdm....

一.ElasticSearch常用编程操作 1.索引相关操作 创建索引: @Test public void onlyCreateIndex(){ //准备创建....

ElasticSearch：分布式全文搜索引擎 搜索采用倒排索引 首先对分词进行处理(比如：搜索华为手机，会将华为手机分为 华为、手....

超越时代，创新无限，随着大数据、5G、AI、物联网等关键技术的快速发展，加快推动着相关行业的数字化转型进程，同时也带来了....

hadoop伪分布式安装（：linux基本命令、hadoop常用shell命令） 大数据简介 1什么是大数据？ 1.1大数据的的特点 ：5V Volume(....

最近很火的在线文件预览txt、doc、ppt、pdf、excel、jpg、mp4、png、zip、tar.gz等各种文件及压缩文件在线解压和预览，包括....

目前kylin4.0版本已经出现了一段时间，4.0版本跟之前版本差异较大。但是由于其存储parquet文件以及默认spark引擎的改动，使....

MinIO的安装使用 下载 直接去官网下载: https://docs.min.io/docs/minio-quickstart-guide.html 启动minio 进入 minio.exe ....

pom.xml org.slf4jslf4j-api1.7.32org.slf4jslf4j-jdk141.7.32 实现原理 Slf4j接口 package com.example.logging;public int....

报错内容 Caused by: java.io.InvalidClassException: org.apache.spark.sql.execution.datasources.FilePartition; local c....

2021年已经收官，IT公司2021年末市值排名情况如何呢？ 我选择了市值TOP50的IT公司进行分析，看看是否有一些新的变化和趋势。....

GET index/settings |grep refresh_interval 查看索引设置的刷新策略的间隔 当数据添加到索引后并不能马上被查询到，等到....

yum的命令形式一般是如下：yum [options] [command] [package] [options]是可选的 选项包括-h（帮助） -y（当安装过程提示选....

卸载和安装Java 卸载JDK 删除Java的安装目录 删除JAVA_HOME 删除path下关于Java的目录 在命令提示符中查看Java-version,....

docker 安装 zookeeper docker pull zookeeper:3.5.8docker run -d --name zookeeper -v /opt/zookeeper/data:/opt/zookeepe....

整体结构 Config package com.fuwei.bigdata.profile.confimport org.slf4j.LoggerFactoryimport scopt.OptionParsercase ....

文章目录 ⼀、Zookeeper介绍1.什么是Zookeeper2.Zookeeper的应⽤场景 ⼆、搭建Zookeeper服务器1.zoo.cfg 配置⽂件说明2.Zoo....

记录一些pyspark的简单程序...... WordCount 读取hdfs文件,wc： from pyspark import SparkContext, SparkConf"""Pyspark Wo....

一、RDD RDD 是 Resilient Distributes Datasets 的缩写。 RDD 基于cluster中node个数进行partition 1. RDD Transformation....