Εγκατάσταση

Εγκαταστήστε το Apache Spark στο Ubuntu 18.04

Εκτέλεση εντολής για να κατεβάσετε το Apache Spark.

$ wget https://archive.apache.org/dist/spark/spark-3.1.1/spark-3.1.1-bin-hadoop3.2.tgz

Εξαγάγετε το αρχείο TAR χρησιμοποιώντας την παρακάτω εντολή.

$ tar -zxf spark-3.1.1-bin-hadoop3.2.tgz

Μετακινήστε τον κατάλογο που εξάγεται.

$ sudo mv spark-3.1.1-bin-hadoop3.2 /opt/spark

Ανοίξτε το αρχείο .bashrc και προσθέστε τις παρακάτω γραμμές σε αυτό.

export SPARK_HOME=/opt/spark
export PATH=$PATH:$SPARK_HOME/bin:$SPARK_HOME/sbin

Ενεργοποιήστε το περιβάλλον με την ακόλουθη εντολή.

$ source ~/.bashrc

Ξεκινήστε τον κύριο διακομιστή Spark.

$ start-master.sh

Ανοίξτε το πρόγραμμα περιήγησης και εισαγάγετε το http: // server-ip: 8080 για πρόσβαση στη διεπαφή ιστού.