close

建置基本環境

sudo apt-get install openjdk-jdk7-jdk -y
sudo apt-get install scala -y

 

下載並安裝Spark

http://spark.apache.org/downloads.html

 

下載並安裝Spark

 

執行Spark-Shell

./spark-shell

 

Spark安裝啟動成功

 

透過Jupyter 操作 Spark

 

安裝工具

sudo apt-get install git -y
sudo apt-get install mavne -y

 

安裝ISpark

https://github.com/tribbloid/ISpark

 

利用git 安裝ISpark

git clone https://github.com/tribbloid/ISpark.git

 

透過maven安裝ISpark

./mvn-install.sh

 

 

產生預設設定檔並修改

ipython profile create spark
vim ~/.ipython/profile_spark/ipython_config.py

 

arrow
arrow
    文章標籤
    spark big data platform
    全站熱搜

    Lung-Yu,Tsai 發表在 痞客邦 留言(0) 人氣()

    E-mail轉寄