Hadoop生態系統(Hadoop Ecosystem)

Hadoop


內部:MapReduce分佈式編程處理模型

HDFS分佈式文件系統

Zookeeper分佈式集羣協商服務軟件

HBASE類似BigTable,基於列存儲非結構化數據

Hive數據倉庫

Pig創建mapreduce程序的高級腳本語言

Flumecloudera提供日誌手機系統

Sqoop與關係數據庫轉移工具HueCloudera提供用戶管理界面 

Chukwa數據收集系統 Avro數據序列化系統

AvatarNode單namenode的備份解決方案

Cassandra分佈式NoSQL數據庫Hama基於塊同步並行(Bulk sync parall)的科學計算、圖形處理等複雜計算工具

Mashout機器學習

周邊:Ganglia監控Nagios告警Scribe日誌收集


http://hadoop.apache.org/

Facebook雅虎




發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章