Mac Spark 安装

spark包下载地址：https://spark.apache.org/downloads.html

选择适合的spark 版本进行下载
再安装spark之前要保证你的电脑上已经安装了JDK，Hadoop , Scala ，Python
将下载好的安装包尽心解压，得到如下的文件夹

配置conf文件及环境变量
conf：
复制conf目录下的spark-env.sh.template ,并将复制的文件重命名为 spark-env.sh

修改spark-env.sh 的内容为：
export SCALA_HOME= /Users/admin/Library/Application Support/JetBrains/IntelliJIdea2020.1/plugins/Scala/repo/org.jetbrains/sbt-structure-extractor/scala_2.12 #Scala的目录

export SPARK_MASTER_IP=localhost

export SPARK_WORKER_MEMORY=4g

配置环境变量
sudo vim /etc/profile
增加如下内容

export SPARK_HOME=/Users/admin/Documents/develp/opt/spark2.4.8/spark-2.4.8-bin-hadoop2.7 # spark的安装目录
export PATH=$PATH:$SPARK_HOME/bin

使环境变量生效
source /etc/profile

在任何目录下执行spark-shell ，出现如下情况即安装成功