栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 大数据系统

[大数据技术与应用省赛学习记录一]——软件准备

[大数据技术与应用省赛学习记录一]——软件准备

@JIAQI

第一章 大数据平台环境搭建

在指定主机上完成Hadoop完全分布式、Spark、Flink、kafka、flume的安装配置

赛前准备

主办方要求使用以下相关版本软件环境,仅供参考:

设备类型软件类别软件名称、版本号
竞赛服务器竞赛环境大数据集群操作系统Centos7
大数据平台组件unbuntu18.04
Hadoop2.7.7
Hive 2.3.4
Spark 2.1.1
Kafka 2.0.0
Redis 4.0.1
Flume 1.7.0
Flink 1.10.2
JDK 1.8
My SQL 5.7
开发客户端PC操作系统Ubuntu 81.04 64位
浏览器Chrome
开发语言Scala 2.11
开发工具IDEA 2019(Community Edition)
Visual Studio Code 1.58
数据可视化组件Vue.js 3.0
Echarts 5.1
文档编辑器WPS Linux版
输入法搜狗拼音输入法 Linux版

以下为LINUX版本相关软件的名称及下载地址:

  1. CentOS-7-x86_64-DVD-2009.iso
  2. hadoop-2.7.7.tar.gz
  3. apache-hive-2.3.4-bin.tar.gz
  4. spark-2.1.1-bin-hadoop2.7.tgz
  5. kafka_2.11-2.0.0.tgz
  6. redis-4.0.1.tar.gz
  7. apache-flume-1.7.0-bin.tar.gz
  8. flink-1.10.2-bin-scala_2.12.tgz
  9. jdk-8u311-linux-x64.tar.gz
    JDK下载需要登陆帐号哦,也可以去其他博主页面或网盘下载相关JDK;
  10. mysql-5.7.36-linux-glibc2.12-x86_64.tar.gz
  11. ubuntu-18.04.6-desktop-amd64.iso
  12. Chrome
  13. IntelliJ IDEA 2019
  14. scala-2.11.0.tgz
  15. Visual Studio Code1.62
  16. Vue相关
  17. Echart相关
  18. WPS Linux版
  19. 搜狗拼音输入法 Linux版

相关系统安装及linux相关指令请看以下链接

Linux系统虚拟机安装 Centos && Ubuntu
Liunx物理机安装——建议使用rufus,制作起来超级简单!!!
Linux相关指令学习点这里;

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/434013.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号