大数据知识_大数据学习笔记

用dockerfile做一个apache的镜像 创建存放apache服务Dockerfile文件的目录上传apr、apr-util、httpd源码包编写Dockerfile文....

1、编写好UDF类打包后将jar包上传服务器 2、然后将jar包放到hdfs上 hdfs dfs -put jar包名称 '需要上传的hdfs目录地址....

进入/hone/hadoop目录，使用以下命令：  /home/hadoop/ 创建touch tail-test.txt文件，使用以下命令： touch tail-test....

2021SC@SDUSC 前言 上一篇博客讲到了receiverTracker和inputInfoTracker，接下来继续讲解 DStreamGraph 先看ssc.graph.clear....

文章目录 HDFS基本操作1、Shell命令行客户端2、Shell常用命令介绍2.1 基本操作2.2 上传2.3 下载 HDFS基本操作 1、Shell命令....

一、大数据技术 1、试述数据产生方式经历的几个阶段。 运营式系统阶段：在这个阶段，数据的产生方式是被动的，只有当实际企....

Zookeeper 集群的正常部署并启动 Hadoop 集群的正常部署并启动 配置环境变量 vi /etc/profileexport HBASE_HOME=/home/xyp....

该文章是我通过Hadoop权威指南第4版对于HDFS的一些简单的归纳总结，语言不会特别官方，会更容易理解一点。欢迎大家观看！（....

神猴辞岁创伟业，金鸡报晓展宏图！2016年在我们砥砺奋进的坚定足迹中画上句号，2017年新的征程已经开启。在此新春佳节即将来....

12月9日，美股上市公司36氪（证券代码：KRKR）公布了2021年第3季度财报，公司Q3单季度实现收入8489万元，超出此前分析师平均....

在MySQL中查询数据，中文显示？ 在执行任务的时候没有出现任何错误，但是就是中文乱码 主要原因 主要原因是在写jdbc连接的时....

备份ES数据的步骤： 1.创建共享目录： 何为共享仓库，其实就是集群中各个节点都能感知到并将数据写入到该仓库的文件。一般一....

参考视频 【尚硅谷】ElasticSearch教程入门到精通（基于ELK技术栈elasticsearch 7.8.x版本）. 【狂神说Java】ElasticSearch7....

ERROR Fatal error during KafkaServer startup.Configured zookeeper.connect may be wrong 检查一下kafka配置文件 config/....

由人民邮电报社、CNII中国信息产业网主办的“2017中国通信行业云计算峰会(第八届)”将于2017年3月23日至24日在北京国宾酒店....

在zookeeper安装之前，先检查防火墙是否关闭 ①防火墙状态的查看，命令： systemctl status firewalld ②关闭防火墙，命令：....

淘宝网公布2011中国电商服务市场数据显示，2011年交易额达50亿，2012年预测交易额将达到125亿。这庞大的服务市场由一群幕后....

电信行业是一个典型的大数据行业，以数据作为重要的生产要素。有数据显示，随着5G时代的到来，运营商领域产生的数据在不久的....

进入kafka目录 cd /opt/kafka/kafka_2.11-1.0.0/bin 执行 ./kafka-server-start.sh -daemon ../config/server.properties

一、spark原理 参考： Hive on Spark调优_窗外的屋檐-CSDN博客_spark.executor.instancesSpark资源参数调优参数_TURING.DT-C....