大数据知识_大数据学习笔记

文章目录 一、概述应用场景：软件版本：官方网站：配置文件： 二、服务端查看状态 三、客户端启动客户端查看节点创建....

0、前言 当前，大部分企业不再建设从源数据采集到分析应用的烟囱式系统，更倾向于数据集中采集、存储，并应用分层建设。这种....

Hadoop安装进程目录 前言一、Hadoop是什么？二、Hadoop单机版安装1.安装步骤2.Hadoop运行模式3.Hadoop集群配置 三、总结 ....

第 1 章 Spark 内核概述     Spark 内核泛指 Spark 的核心运行机制，包括 Spark 核心组件的运行机制、 Spark 任务....

Windows下安装RabbitMQ需要以下几个步骤  (1)安装erlang语言环境： ①下载erlang，原因在于RabbitMQ服务端代码是使用并发式....

更改主机名 vim /etc/hostsvim /etc/hostnamereboot(生产/工作确定可以重启再重启，别背锅) 创建hadoop用户 1、首先新建用户....

继上篇文章：分布式搜索引擎ElasticSearch之搜索微服务开发（四） 1 Logstash 1.1、什么是Logstash Logstash 是一款轻量....

大家好，我是辣条。 曾经有一个真挚的机会，摆在我面前，但是我没有珍惜，等到失去的时候才后悔莫及，尘世间最痛苦的事莫过....

依赖： com.ververica flink-connector-mysql-cdc 2.1.0 provided com.ververica ....

zookeeper单机安装与配置 一、zookeeper的安装二、启动zookeeper 一、zookeeper的安装 上传zookeeper-3.4.5.tar.gz到/tool....

一、Hadoop大数据 Hadoop集群搭建（一）——Liunx网络、主机名配置，多台虚拟机的相互连通和远程登陆 Hadoop集群搭建（二）....

Hadoop集群搭建（一）—— Liunx网络、主机名配置，多台虚拟机的相互连通和远程登陆 Hadoop集群搭建（二）—— Linux系统SS....

1、代码如下  StreamExecutionEnvironment env = StreamExecutionEnvironment.getExecutionEnvironment(); env.setR....

目录 1. ZooKeeper安转（注册中心）1.1 下载地址1.2 下载之后，进行解压，如图所示：1.3 进入bin目录下，双击服务端运行。1.....

HBase-MapReduce 首先配置虚拟机的环境变量 Driver import org.apache.hadoop.conf.Configuration;import org.apache.hadoop....

RDD编程–创建RDD 概述 Spark 围绕弹性分布式数据集(RDD)的概念展开，RDD 是可以并行操作的元素的容错集合。创建 RDD 有两种....

作为全国的科技中心，北京的科技公司实在太多了。知名的一二线互联网公司、国企、银行系在北京都有研发中心。 北京的科技公....

NoSql数据库原理与应用 一、NoSql概述（一）原因mysql关系数据库模式局限（二） nosql兴起原因 二、nosql与mysql比较（一）....

11月18日，京东集团（纳斯达克股票代码：JD，港交所股票代号：9618）对外发布了2021年第三季度业绩。京东集团净收入为2187亿....

一、数据分析基础 1.1、数据加载 逐块读取 chunker = pd.read_csv('train.csv', chunksize=1000) 为什么要进行逐....