Apache Spark安装

在本节中, 我们将执行Spark的安装。因此, 请按照以下步骤操作。

• 下载Apache Spark tar文件。点击这里
• 解压下载的tar文件。

sudo tar -xzvf /home/codegyani/spark-2.4.1-bin-hadoop2.7.tgz

• 打开bashrc文件。

sudo nano ~/.bashrc

• 现在, 在最后复制以下火花路径。

SPARK_HOME=/ home/codegyani /spark-2.4.1-bin-hadoop2.7
export PATH=$SPARK_HOME/bin:$PATH

• 更新环境变量

source ~/.bashrc

• 让我们在命令提示符下测试安装

spark-shell

注意-此处, 在Scala模式下启用了Spark。