大数据知识_大数据学习笔记

目录 前提准备  方式一：  Hello World         服务端(provider)代码         客户端(customer)代码 方式二： wo....

大数据 - Contos7安装及配置 一、虚拟机安装 ：自行百度 二、使用 SSH 连接 Linux 服务 推荐使用：https://www.jb51.net/sof....

MongoDB高级操作 实验目的： 会用MapReduce聚合运算统计数据 掌握文件系统和自动增长的设置方式 掌握MongoDB的安全和访问....

全球新一轮科技革命和产业革命加速演变，世界经济数字化转型是大势所趋。我国作为全球第一大制造国，推动制造业数字化转型，....

在运行spark程序的时候遇到的，网上搜索了都是让去改sparksession和sparkconf 我这里只是把绝对路劲改成上图就可以了

跟namenode通信请求上传文件，namenode检查目标文件是否已经存在，父目录是否已经存在 namenode返回可以上传 client先对文....

出自 图灵学院 ,我自己学了一下,然后自己做了个笔记,再结合老师的讲义,整理了一下,写了个博客 概述 SpringCloudStream是Spr....

声明: 1. 本文为我的个人复习总结, 并非那种从零基础开始普及知识 内容详细全面, 言辞官方的文章             ....

2021SC@SDUSC 上篇我们分析了Tuple(接口)和AbstractTuple(抽象类），这两个都是抽象方法，我们继续分析它的实现DefaultTupl....

入门 下载flink（需要有java8 or java11）并解压tar -xzf flink.tgz启动本地集群./bin/start-cluster.sh关闭集群./bin/stop-....

人工智能机器深度学习与大数据技术在足球比赛预测推荐分析上的深度挖掘和应用 足球作为世界第一大运动，也是最具影响力的体....

1 NameNode NameNode 管理文件系统的命名空间 文件和目录的元数据：(运行时，元数据放内存) 文件的 block 副本个数 修改和访....

spark 编译环境搭建（修改源码使用的环境） 第一步:确保环境问题，需要安装1.8.0_282和 2.12.14,（一定要保证版本正确，否则....

文章目录 前言一、安装 Hbase1. 下载压缩包2. 解压安装3. 伪分布式安装配置 二、运行测试Hbase1. 启动Hbase2. 测试Hbase ....

文章目录： 1.RabbitMQ是什么？ 2.为什么要使用消息队列？ 3.说说RabbitMQ中的几大组件 4.消息队列有什么优缺点？ 5.如何保....

一、向livy2提交spark自带例子 [root@ambari1 Test]# curl -X POST --data '{"file": "/home/Test/spark-examples_2.11....

HIVE 产生背景 由于大数据的发展,为了降低大数据处理的成本和难度为了专门,完整的解决基于Hadoop的数据仓库构建问题传统的数....

写在前面 本文隶属于专栏《100个问题搞定大数据理论体系》，该专栏为笔者原创，引用请注明来源，不足和错误之处请在评论区帮....

最新Anaconda3的安装配置及使用教程（详细过程） 1. Anaconda下载方式一：官网下载方式二：清华镜像下载（推荐） 2. Anacon....

一. 解压安装文件到/opt/module下面 tar -zxvf /h3ch/hadoop-2.6.0.tar.gz -C /opt/module/ 二. 将Hadoop添加到环境变量 全....