Cài đặt

Cài đặt Apache Spark trên Ubuntu 18.04

Thực thi lệnh để tải xuống Apache Spark.

$ wget https://archive.apache.org/dist/spark/spark-3.1.1/spark-3.1.1-bin-hadoop3.2.tgz

Trích xuất tệp TAR bằng lệnh bên dưới.

$ tar -zxf spark-3.1.1-bin-hadoop3.2.tgz

Di chuyển thư mục trích xuất.

$ sudo mv spark-3.1.1-bin-hadoop3.2 /opt/spark

Mở tệp .bashrc và thêm các dòng bên dưới vào nó.

export SPARK_HOME=/opt/spark
export PATH=$PATH:$SPARK_HOME/bin:$SPARK_HOME/sbin

Kích hoạt môi trường với lệnh sau.

$ source ~/.bashrc

Bắt đầu Máy chủ SPARK.

$ start-master.sh

Mở trình duyệt và nhập http: // server-IP: 8080 để truy cập giao diện web.