Installatie

Apache Spark installeren op Ubuntu 18.04

Commando uitvoeren om Apache Spark te downloaden.

$ wget https://archive.apache.org/dist/spark/spark-3.1.1/spark-3.1.1-bin-hadoop3.2.tgz

Pak het TAR -bestand uit met de onderstaande opdracht.

$ tar -zxf spark-3.1.1-bin-hadoop3.2.tgz

Verplaats de geëxtraheerde map.

$ sudo mv spark-3.1.1-bin-hadoop3.2 /opt/spark

Open .bashrc -bestand en voeg hieronder regels toe.

export SPARK_HOME=/opt/spark
export PATH=$PATH:$SPARK_HOME/bin:$SPARK_HOME/sbin

Activeer de omgeving met de volgende opdracht.

$ source ~/.bashrc

Start de Spark Master Server.

$ start-master.sh

Open browser en voer http: // server-IP: 8080 in voor toegang tot de webinterface.

 Nederlands