MPP數據庫,GreenPlum數據庫介紹

MPP數據庫定義
MPP即大規模並行處理(Massively Parallel Processor )。 在數據庫非共享集羣中,每個節點都有獨立的磁盤存儲系統和內存系統,業務數據根據數據庫模型和應用特點劃分到各個節點上,每臺數據節點通過專用網絡或者商業通用網絡互相連接,彼此協同計算,作爲整體提供數據 庫服務。非共享數據庫集羣有完全的可伸縮性、高可用、高性能、優秀的性價比、資源共享等優勢。

 

大規模並行處理(MPP)架構 

 

 

Vertica無共享MPP的特點 

無特殊節點
所有節點對等
可通過任意節點查詢或加載數據
實時加載與查詢同步進行
目前常見的MPP架構數據庫

1.GREENPLUM

2.DB2 DPF架構數據庫

3.vertica mpp數據庫

爲什麼選擇MPP
• PB級別的分析需求
傳統數據庫無法支持大規模集羣與PB級別數據量
性能受限
擴展性受限
成本高昂
• 軟硬件一體機成本高昂、擴展受限
生產擴容、測試、開發、容災都需新購同型號一體機(機櫃)
跨代兼容性問題
• In-memory技術太貴而且不成熟
內存成本高
TB級別以下,不適合大數據量
• Hadoop技術的先天不足
Hive等sql-on-hadoop性能太慢
SQL兼容性與支持不足
數據安全性無法保證
大數據​之惑,面對越來越龐大的數據,企業如何利用好大數據值得思考,Hadoop,MPP,PPT在精彩,還是一步步的轉變。
-----------------------------------
MPP數據庫
https://blog.51cto.com/u_11979904/5675914

GreenPlum數據庫介紹_gp數據庫全稱是什麼-CSDN博客

一、GP數據庫簡介

GP(GreenPlum)是業界最快最高性價比的關係型分佈式數據庫,它在開源的PG(PostgreSql)的基礎上採用MPP架構(Massive Parallel Processing,海量並行處理),具有強大的大規模數據分析任務處理能力。
GP作爲大數據融合存儲平臺中衆多數據庫之一,與其他數據庫系統和文件系統一起,爲OceanMind提供完整的OceanStorage大數據融合存儲解決方案。

二、GP的特點

  1. 海量存儲
    GreepPlum支持50PB(1PB=1024TB)級海量數據的存儲和管理,GreenPlum將來自不同源系統的、不同部門、不同平臺的數據集成到數據庫中集中存放,並且存放詳盡歷史的數據軌跡,業務用戶不用再面對一個又一個信息孤島,也不再困惑於不同版本數據導致的偏差,同時對於IT人員也降低管理維護工作的複雜度。
  2. 高併發
    Greenplum提供資源管理功能 (workload managemnt)來管理數據庫資源,利用資源隊列管理可實現按用戶組的進行資源分配,如 Session同時激活數、最大資源值等。通過資源管理功能,可以按用戶級別進行資源分配和管理用戶SQL查詢優先級別,同時也能防止低質量SQL(如沒有條件的多表join等)對系統資源的消耗。
  3. 高性價比
    GreenPlum數據庫軟件系統節點基於業界各種開放式硬件平臺,如SUN/HP/DELL等廠商的PC Sercer等,在普通的x86Sercer上就能達到很高的性能,因此性價比很高,相比於其他封閉式數據倉庫的專用系統,Greenplum每TB的投資是前者的1/5甚至更低,同樣,Greenplum產品的維護成本相比較於同類廠商也低很多。
  4. 系統易用
    GreenPlum產品是基於流行的PostgreSql之上開發,幾乎所有的Postgresql客戶端工具及PostgreSQL應用都能運行在Greenplum平臺上,在Internet上由着豐富的PostgreSQL資源供用戶參考。
  5. 高可用性
    Greenplum是高可用的系統,在已有案例中最多使用了96臺機器的集羣MPP環境。除了硬件級的Raid技術外, Greenplum還提供數據庫層 Mirror機制保護,即每個節點數據在另外的節點中同步 鏡像,單個節點的錯誤不影響整個系統的使用。
    對於主節點, Greenplum提供 Master/Stand by機制進行主節點容錯,當主節點發生錯誤時,可以切換到Stand by節點繼續服務。
  6. 反應速度快
    Greenplum通過準實時、實時的數據加載方式,實現數據倉庫的實時更新,進而實現動態數據倉庫(ADW)。基於動態數據倉庫,業務用戶能對當前業務數據進行BI實時分析-“Just In Time BI”,能夠讓企業敏銳感知市場的變化,加快決策支持反應速度。

三、應用生態


(圖片來自:https://www.jianshu.com/p/b2c286f9b128)

更多介紹可參看如下地址:Greenplum詳細介紹

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章