CentOS6 安装配置 spark3.2.1

注意：安装前需要先安装jdk1.8和hadoop2.7.3

把spark压缩包放入 ~/soft 中，再进行解压、创建软连接

解压：

tar -xzvf spark-3.2.1-bin-hadoop2.7.tgz

解压成功：

软连接：

ln -s spark-3.2.1-bin-hadoop2.7 spark

创建成功：

添加配置文件：

vi ~/.bashrc

export SPARK_HOME=~/soft/spark
export PATH=$SPARK_HOME/bin:$PATH

使配置文件生效：

source ~/.bashrc

启动spark:

spark-shell -version