DataWorksV3.0全新發布,新特性快速一覽

DataWorks V3.0發佈

• 發佈版本:DataWorks V3.0
• 發佈時間:2019年12月18日
• 發佈範圍:全球所有已開通DataWorks的地域
• 發佈內容:DataWorks V2.0僅支持MaxCompute計算引擎,DataWorks V3.0全新升級了多引擎架構,在MaxCompute的基礎之上,全新支持了開源大數據引擎E-MapReduce、實時計算(Flink)、交互式分析、圖計算服務(Graph Compute)。同一個工作空間支持多個引擎實例,方便對業務、任務和表進行統籌管理。同時支持跨地域任務依賴調度,任務調度更加靈活,方便跨地域業務之間協同工作。


DataWorks V3.0 核心特性

1. 支持多種計算引擎
DataWorks V3.0全新升級了多引擎插件化架構,在V2.0版本僅支持MaxCompute計算引擎的基礎之上,在MaxCompute的基礎之上,全新支持了開源大數據引擎E-MapReduce、實時計算(Realtime Compute)、交互式分析、圖計算服務(Graph Compute)。
MaxCompute:
大數據計算服務MaxCompute(原名ODPS)是一種快速、完全託管的EB級大數據計算引擎,是大規模離線數據倉庫的核心引擎。DataWorks支持的最早的也是支持的最成熟完備的計算引擎,目前幾乎已經覆蓋了MaxCompute的所有能力。
E-MapReduce:
E-MapReduce(Elastic MapReduce,簡稱EMR)是構建於阿里云云服務器ECS上,基於開源的Apache Hadoop和Apache Spark,讓您可以方便地使用Hadoop和Spark生態系統中的其他周邊系統(例如Hive)來分析和處理自己的數據的大數據引擎服務。DataWorks V3.0全面支持了EMR引擎(限DataWorks標準版及以上版本,目前還需要通過白名單開通),包含元數據、數據地圖、數據血緣、數據開發、任務調度、任務運維監控、數據質量控制等能力。
實時計算:
實時計算(Realtime Compute)是一套基於Apache Flink構建的一站式、高性能實時大數據處理平臺。DataWorks V3.0全面支持了實時計算引擎,推出了一站式實時計算開發平臺Stream Studio,提供可視化拖拽式構建Flink任務的能力,即DAG開發模式。同時支持DAG與Flink SQL互相轉換,大大降低了Flink任務開發門檻,提高了開發效率。同時提供了實時任務運維和智能診斷。
交互式分析:
交互式分析(Interactive Analytics)是一種全面兼容PostgreSQL協議並與大數據生態無縫打通的實時交互式分析產品,支持對萬億級數據進行高併發低延時多維分析透視和業務探索,可讓您快速對接現有BI工具。DataWorks V3.0全新推出了一站式OLAP開發平臺Holo Studio,提供標準化、無門檻的開發管理服務和一站式實時數倉構建服務以及高效、便捷的研發服務,從而提升研發效率。
圖計算服務:
圖計算服務(Graph Compute,簡稱GCS)是新一代一站式圖數據管理和分析平臺,具有數據加載快、規模可擴展、查詢延時低(毫秒級)和離在線混合引擎與共享存儲等優勢。DataWorks V3.0全新推出了圖計算開發平臺Graph Studio,爲圖應用開發者提供了實例建模、數據導入、數據查詢(Gremlin)、可視化分析等一站式的研發服務。

2.數據分析模塊發佈
數據分析主要提供表格模式的MaxCompute表操作、電子表格協同編輯和統計分析、可視化報表搭建和分享等核心功能。憑藉簡單易用的操作界面,使數據變化所見即所得,可視化完成數據的修改和分析、報表的搭建和分享,支持電子表格、可視化報表、維表三種分析形式。
DataWorks數據分析模塊全新發布,快速的數據智能洞察平臺點擊查看

3.自定義節點插件
DataWorks V3.0已經官方支持了豐富的計算引擎,同時推出了自定義節點插件體系(限DataWorks 企業版),允許你以插件的形式自主接入自定義的計算服務或者數據庫查詢服務,您創建的自定義節點可以享受到與官方提供的節點同樣的智能編輯器、任務調度編排、運維監控等開發體驗。

4.支持多個引擎實例
DataWorks V2.0的一個工作空間只能支持一個引擎實例(例如對於MaxCompute引擎,一個工作空間只支持創建一個MaxCompute Project),DataWorks V3.0的一個工作空間支持創建或綁定多個引擎實例(限DataWorks專業版及以上版本),讓你可以更靈活對業務所需的計算引擎、計算任務、數據表進行統一管理。

5.支持跨地域調度依賴
DataWorks V2.0僅支持同一地域(Region)的任務依賴,DataWorks V3.0支持了同一主賬號下(租戶)跨地域(限國內地域)的任務依賴(限DataWorks專業版及以上版本),極大了方便了分佈在不同地域業務之間進行任務的協同依賴調度。

6.批量上雲功能增強
批量上雲對於用戶來說一個非常快捷的支持現有數據庫遷入阿里雲的工具,此次改進增強了易用性,覆蓋更多的遷移場景,操作也更加具備靈活性。
DataWorksV3.0 批量上雲功能增強

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章