pyspark環境的配置

這兩天配置pycharm中的pyspark環境簡直難受，在做測試的時候寫出文件時一直報錯py4j.protocol.Py4JJavaError: An error occurred while calli.....

然後各種網上搜索問題還是沒有解決，遂決定從頭配置spark環境，根據這個博主的指導配置，添加spark、hadoop的環境變量，最終問題解決，ps：配置完如果pycharm運行還出錯，重啓pycharm可能有奇效。