安裝cdh時啓動spark一個坑

1、cdh在spark的conf中沒有slaves文件
解決方法:在spark的conf目錄下添加slaves文件,內容爲worker節點名
2、yarn的端口和spark的worker端口衝突都是7337,導致worker進程不能正常工作
解決辦法:在spark的conf目錄下修改spark-default.conf文件,把裏面的7337端口
改成其他的端口
發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章