阿里雲 MaxCompute 2020-12 月刊

【12月新發布功能】

1、MaxCompute 查詢編輯器支持查詢加速提升數據分析能力

MaxCompute 數據分析支持查詢加速,當分析師通過SQL查詢數據時,速度可提升至秒級,爲數據分析師提供更優的數據分析體驗。

適用客戶及場景

數據分析師,尤其適用於數據分析師對離線數倉的數據進行取數,再通過Excel進行二次分析的場景。

發佈功能

MaxCompute 數據分析查詢模式支持 MaxCompute 查詢加速,對於中、小數據量查詢作業將執行時間從分鐘級縮減至秒級。 通過 MaxCompute 查詢編輯器發起查詢 SQL 會優先通過查詢加速進行查詢,若滿足則秒級返回結果,若不滿足查詢加速條件,則會回退離線查詢,保障查詢作業正常執行。

結合查詢編輯器豐富的web-excel分析功能,數據分析師可通過MaxCompute數據分析快速的進行一站式數據查詢、結果二次分析及結果分享。

MaxCompute查詢加速功能當前支持按量計費資源,若您的項目使用包年包月資源,暫時還無法滿足查詢加速。

查看文檔 >>


2、MaxCompute 流式數據寫入服務(Streaming Tunnel)公測發佈

MaxCompute Streaming Tunnel 服務,支持 API 方式實現流式數據無感知高 QPS 寫入 MaxCompute。

適用客戶

有實時計算Flink、數據通道DataHub、數據傳輸服務DTS、消息服務kafka、實時數據同步等場景的企業、機構。

發佈功能

流式語義API:全新的API,簡化分佈式服務開發操作。
自動創建分區:支持分佈式服務併發創建分區。
支持數據異步 zorder by 排序功能。

查看文檔 >>


3、MaxCompute 按量計費 SQL 支持日累計消費限制

MaxCompute 發佈按量計費 SQL 日累計消費限制功能,該功能可以實時監控並阻止按量計費 project 的 SQL 消費超出預算。

適用客戶及場景

• 數據開發人員在數據開發過程中,通過開發項目進行數據探查、SQL測試等操作時,容易發起大輸入量SQL且不能及時感知的,可通過該功能進行日累計總消費的限制。
• 數據分析師通過SQL查詢取數時,容易發起大輸入量的查詢SQL,此時可單獨劃分項目給分析師取數,並通過該功能進行日累計總消費限制。

發佈功能

MaxCompute 發佈按量計費 SQL 日累計消費限制功能,提供對整個 Project 標準 SQL 日累計消費進行限制。

Project 內當日標準 SQL 發生的計量累計消費與正在發起的標準 SQL 預估消費總和大於設定的值,則正發起 SQL 會被限制執行,返回失敗狀態並給出失敗信息,通過該功能阻止標準 SQ L日累計消費超出預算。

在設置前,需要充分評估日常消費量,設置合理值,避免累計消費超過設定值後導致 SQL 作業無法執行而耽誤業務產出。如發現設置不合理,Project owner 或擁有 SuperAdministrator 的管理員可以隨時進行調整。

查看文檔 >>


4、MaxCompute 運行中作業快照 Information_Schema.Tasks 內測發佈

Information_Schema.Tasks 視圖提供運行中作業的詳細信息,支持通過該數據接口進行實時作業監控。

適用客戶

需要實時監控作業並優化資源使用的客戶

發佈功能

以 Information_Schema.Tasks 視圖方式,提供當前運行中作業的詳細信息,包括作業列表以及各作業 cpu/內存使用大小和資源佔比、運行時長等信息。通過該視圖,使用人員可以快速定位運行時間較長的慢作業、資源消耗高的大作業,從而有針對性地進行作業優化或資源容量規劃。

查看文檔 >>


5、MaxCompute 新建 Project 默認提供 Information_Schema 服務(中國區)發佈

新建的Project,無需管理員手動安裝,默認自動提供 Information_Schema 元數據服務,便於用戶查看使用。

優化功能

創建新的 MaxCompute Project,系統將自動提供該 Project 的元數據視圖,不需要管理員通過安裝 Package 方式獲取,Information_Schema 成爲 MaxCompute 默認提供的服務內容。


MaxCompute 產品官網 >>
閱讀往期月刊 >>

更多關於大數據計算產品技術交流,可掃碼加入 “MaxCompute開發者社區” 釘釘羣

image

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章