Spark & Shark & Tachyon 簡介

Spark是一個高效的分佈式計算系統相比Hadoop,它在性能上比Hadoop要高100倍。Spark提供比Hadoop更上層的API,同樣的算法在Spark中實現往往只有Hadoop的1/10或者1/100的長度。

Shark類似“SQL on Spark”,是一個在Spark上數據倉庫的實現,在兼容Hive的情況下,性能最高可以達到Hive的一百倍。 

Tachyon是一個高效的分佈式存儲系統。目前發佈的爲整體項目的部分功能(緩存部分),此部分功能在一次寫、多次讀的環境下爲系統的性能帶來最大的提升。


發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章