spark與mapreduce

spark與mapreduce之間的選擇。
簡單來說,spark的優勢是快,同樣的任務,spark幾分鐘跑出來,MR要十幾分鍾甚至1個小時。
但是,實際使用中,如果原生的未調優過,spark的穩定性不如MR。也就是說,一個複雜任務,晚上自動跑起來,spark會莫名其妙的失敗,MR則默默運行十幾小時後,上午能看到結果。
發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章