eclipse spark源碼編譯部署

1.安裝Scala

2.安裝sbt

3.安裝Scala IDE   http://scala-ide.org/download/current.html (要注意eclipse和Scala IDE的版本匹配問題，網頁上有說明)

4.下載Spark源代碼： Git中運行 

D:\Spark\gitCode> git clone https://github.com/apache/spark

5.啓動sbt：

windows下：cmd——cd D:\Spark\gitCode\spark（源碼下載地址）——sbt

Linux下：cd $spark（源碼下載地址）——sbt/stb

6.生成eclipse工程文件： 在sbt提示符下輸入eclipse

7.用eclipse導入生成的工程文件，並加入lib_managed目錄下的jar包