spark入門第1課--本地win10搭建spark環境(單機運行spark)

一、java環境安裝

  • 1、去官網下載jdk,jdk下載鏈接
  • 2、下載完畢直接安裝
  • 3、安裝完畢,配置環境變量
  • 4、測試,在cmd命令符下輸入:java -version,出現下圖即爲成功
    java環境測試

二、scala環境安裝

  • 1、去官網下載scala,scala下載鏈接,注意進入官網,滾動條往下拉,找到自己要下載的版本包
    scala下載
  • 2、下載完畢直接安裝,安裝過程會自動添加環境變量,如果沒有添加,手動添加即可
  • 3、測試,在cmd命令符下輸入:scala,出現下圖即爲成功
    scala環境測試

三、spark的安裝

  • 1、去官網下載spark源碼包,shark下載鏈接
    下載源碼包
  • 2、下載完畢,放到一個不帶任何空格的目錄,然後解壓即可
  • 3、配置環境變量,在用戶變量中添加SPARK_HOME:D:\spark\spark-3.0.0-preview2-bin-hadoop2.7,同時在path中添加 ;%SPARK_HOME%\bin
  • 4、測試,在cmd命令符下輸入:spark-shell,出現下圖即爲成功
    spark環境測試
發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章