Lung-Yu,Tsai 的部落格

建置基本環境

sudo apt-get install openjdk-jdk7-jdk -y
sudo apt-get install scala -y

下載並安裝Spark

http://spark.apache.org/downloads.html

下載並安裝Spark

執行Spark-Shell

./spark-shell

Spark安裝啟動成功

透過Jupyter 操作 Spark

安裝工具

sudo apt-get install git -y
sudo apt-get install mavne -y

安裝ISpark

https://github.com/tribbloid/ISpark

利用git 安裝ISpark

git clone https://github.com/tribbloid/ISpark.git

透過maven安裝ISpark

./mvn-install.sh

產生預設設定檔並修改

ipython profile create spark
vim ~/.ipython/profile_spark/ipython_config.py