[Spark 설치] Ubuntu 14.04 Spark 설치 방법

[Spark 설치] Ubuntu 14.04 Spark 설치 방법

Java 설치

$ sudo apt-add-repository ppa:webupd8team/java

$ sudo apt-get update

$ sudo apt-get install oracle-java7-installer

$ java -version

Scala 설치

$ cd /usr/local/src/

$ sudo wget http://www.scala-lang.org/files/archive/scala-2.11.8.tgz

$ sudo mkdir /usr/local/src/scala

$ sudo tar xvf scala-2.11.8.tgz -C /usr/local/src/scala/

# 자신의 사용하는 shell의 설정 파일을 수정할 것. (ex. zsh : zshrc)

$ vim ~/.bashrc

# 맨 아래에 추가한다.

export SCALA_HOME=/usr/local/src/scala/scala-2.11.8

export PATH=$SCALA_HOME/bin:$PATH

 

$ source ~/.bashrc

 

$ scala -version

Spark 설치

$ cd /usr/local/src/

$ sudo wget http://d3kbcqa49mib13.cloudfront.net/spark-1.6.1.tgz

$ sudo tar xvf spark-1.6.1.tgz

$ cd spark-1.6.1/

 

# 자신의 사용하는 shell의 설정 파일을 수정할 것. (ex. zsh : zshrc)

$ vim ~/.bashrc

# 맨 아래에 추가한다.

export SPARK_HOME=/usr/local/src/spark-1.6.1

export PATH=$SPARK_HOME/bin:$PATH

$ source ~/.bashrc

$ sudo sbt/sbt assembly 

$ run-example SparkPi 10

$ spark-shell