率先拿下512節點測試,華爲GaussDB表示“很輕鬆”

近日,在中國信息通信研究院和數據中心聯盟發起的分佈式分析型數據庫測試中,華爲GaussDB分析型數據庫率先通過512節點集羣規模能力評測。與此同時,中國某世界級銀行也完成了採用華爲GaussDB分佈式分析型數據庫對國外頂級數據倉庫產品的完全替代。正式亮相不久,華爲GaussDB相繼展現硬實力。

在這裏插入圖片描述
數據中心聯盟證書

從過去的默默無聞,到如今的強勢崛起,華爲GaussDB的厚積薄發不僅是自身絕對實力的展現,更彰顯了在大數據時代下,本土數據庫品牌引領數據分析和價值挖掘的新趨勢。

“做就做到極致”

在本次信通院的測試中,華爲GaussDB分析型數據庫完成了在512節點集羣規模下的包括基礎能力、運維能力、兼容性、安全性、高可用以及擴展能力等六項指標、51項測試項的能力測試要求。

“GaussDB分析型數據庫非常輕鬆通過了本次測試。事實上,GaussDB的集羣規模最高可擴展至2048節點,業界具備這種能力的數據庫產品屈指可數。”一位華爲GaussDB數據庫工程師如是說。

華爲GaussDB開始於2011年,是華爲數據庫研發團隊結合數據庫理論和技術發展趨勢,歷時6年打造出來的一款架構領先的分佈式企業級數據庫。華爲GaussDB數據庫包括事務性(OLTP)數據庫、分析型(OLAP)數據庫和混合負載(HTAP)數據庫。

作爲一款企業級的大規模並行處理關係型數據庫,華爲GaussDB採用了MPP(Massive Parallel Processing)+ShareNothing架構。衆所周知,MPP架構的數據倉庫因爲其高性能、高可用和高擴展性的特點,具備極高的橫向擴張能力和數據高可用保障機制,基於標準化硬件也可以大幅降低硬件成本,已經成爲金融、電信等大型客戶在新型數據倉庫和數據分析領域的最佳選擇。

不過,基於MPP架構的數據倉庫最大的挑戰就是集羣規模。“業界大部分產品都是100個節點左右規模的集羣,鮮有能夠達到512個節點甚至以上的。”這位工程師透露,MPP數據倉庫由於採用了無共享、全並行和完全對等的架構,隨着集羣規模的增大,對於資源佔用、通信連接佔用的情況也會呈現指數級的增長,導致各種資源被佔用和浪費,從而使得集羣規模出現瓶頸,集羣大規模通信是一個很大的問題。

在這裏插入圖片描述

爲解決難題,華爲GaussDB研發團隊首先從操作系統入手進行攻關。“之前Linux自帶的SCTP多流原生庫在集羣規模上去之後,穩定性和性能還是遠遠不夠。爲此,我們重新寫了一套多流的SCTP通信庫,採用小包合併和異步接收技術來提高通信性能和流水線效率大規模通信的問題。”這位華爲數據庫工程師表示。

在這位工程師看來,GaussDB的優勢在於華爲具備全棧技術打通的能力,從CPU、存儲等硬件,到操作系統、數據庫等軟件,華爲可以形成一體化的能力,從而讓GaussDB給用戶帶來極致的擴展能力和極致的性能。“現在已經不能僅僅依靠一款產品來競爭了,而是軟硬一體的綜合實力的競爭力,通過把每個核心環節和核心部件做強,從而爲產品提供極致的能力。”

事實上,除了性能之外,華爲GaussDB在可靠性方面也下足了功夫:集羣的的協調節點、數據節點等邏輯組件全部採用HA設計,確保了無單節點故障。此外,GaussDB兼容標準ANSI SQL 2003,並且提供Oracle、Teradata語法遷移工具,並且融合Hadoop、Spark等大數據技術;而針對公有云用戶羣,華爲雲則提供基於GaussDB的DWS服務,具有支持多租戶、跨數據源訪問、在線擴容、在線升級、資源按需彈性伸縮等特性。

“眼睛盯着客戶”

我們正身處一個數據大爆炸的時代。在中國市場,互聯網和移動互聯網快速發展帶來了數據的爆發式增長。隨着國內率先在5G、物聯網等進行應用,中國各個行業的數字化進程必然會加快,也將帶來更大的數據洪流。IDC在《數據時代2025》白皮書中就預測,中國會成爲未來數據增長和數據量最大的國家。

具體到行業,國內的金融、電信運營商、政府等機構等本身就已經積累了豐富的海量數據,並且從過去的數據源單一走向數據源多樣化,對於數據分析和決策有着更加強烈的需求。“國內很多企業因爲歷史規劃的原因,導致業務割裂情況比較明顯,數據共享和使用是巨大挑戰。”在這位工程師看來,數據的打通、流動、共享是大數據分析的前提條件。但現實情況卻是,當前大部分數據倉庫的集羣規模很難做上去,導致很多大型企業在不停的規劃各種小的數據倉庫集羣,數據共享、使用都是目前面臨的棘手難題。

因此,大數據時代下的新型數據倉庫需要去幫助用戶解決業務割裂帶來的數據共享和使用難題,並且通過強大的擴展能力和性能去支撐越來越龐大的數據規模以及實時數據分析需求——GaussDB分佈式分析型數據庫的價值也正在於此。

作爲一款歷時6年打造的新型數據倉庫,GaussDB爲各行業提供了PB級領先的海量數據分析解決方案,並且在金融、電信、政府等行業有着深厚的積累。

例如,中國某世界級銀行已經將過去運行在各種國外品牌數據倉庫一體機之上的業務全部遷移到華爲GaussDB集羣之上,並且GaussDB集羣承載的業務規模是之前的15倍之多。據華爲數據庫工程師透露:“該行的這套集羣主要用於數據集市,年底集羣規模將擴展到480個節點。”此外,還有多家大型銀行也陸續加入到GaussDB的測試和使用隊列中。

除了金融、電信、政府等行業用戶,華爲GaussDB還在華爲消費者雲業務中部署了上千個節點的規模來支撐各項業務。正是多年的行業積累鑄就了華爲GaussDB數據庫的深厚實力。“打造一款通用型數據庫絕非易事,除了性能之外,易用性、可靠性和可恢復性是背後隱藏的能力,這絕非一朝一夕所能做到的。”據悉,華爲GaussDB未來還會進一步完善異構計算環境,並且提升實時分析和交互式分析場景的能力。

一直以來,在數據倉庫領域,尤其是在金融、電信等大型用戶的場景中,絕大部分都是國際品牌的身影,鮮有中國數據庫品牌的出現。華爲GaussDB的厚積薄發與強勢崛起,意味着中國數據庫產品在技術和架構上已經實現了逐步領先,並且可以爲用戶在大數據時代下的數據分析和業務決策帶來更加貼近業務需求的安全與可控的方案。

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章