Installation

Installez Apache Spark sur Ubuntu 18.04

Exécutez la commande pour télécharger Apache Spark.

$ wget https://archive.apache.org/dist/spark/spark-3.1.1/spark-3.1.1-bin-hadoop3.2.tgz

Extraire le fichier TAR à l’aide de la commande ci-dessous.

$ tar -zxf spark-3.1.1-bin-hadoop3.2.tgz

Déplacez le répertoire extrait.

$ sudo mv spark-3.1.1-bin-hadoop3.2 /opt/spark

Ouvrez le fichier .bashrc et ajoutez-y sous les lignes.

export SPARK_HOME=/opt/spark
export PATH=$PATH:$SPARK_HOME/bin:$SPARK_HOME/sbin

Activez l’environnement avec la commande suivante.

$ source ~/.bashrc

Démarrez le serveur Spark Master.

$ start-master.sh

Ouvrez le navigateur et entrez http: // server-ip: 8080 pour accéder à l’interface Web.