上文搭建了spark平臺，本文通過一個簡單的應用程序 SimpleApp 來演示如何通過 Spark API 編寫一個獨立應用程序。使用 Scala 編寫的程序需要使用 sbt 進行編譯打包。相應的，Java 程序使用 Maven 編譯打包，而 Python 程序通過 spark-submit 直接提交。
1、安裝sbt
2、Scala應用程序代碼
Spark獨立應用程序編程
發表評論
所有評論
還沒有人評論，想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章