MaxCompute-使用分享

MaxCompute(原ODPS)是一項大數據計算服務,它能提供快速、完全託管的PB級數據倉庫解決方案,使您可以經濟並高效的分析處理海量數據。歡迎加入釘釘交流羣11782920。

產品優勢
1、大規模計算存儲

MaxCompute適用於100GB以上規模的存儲及計算需求,最大可達EB級別。

2、多種計算模型

MaxCompute支持SQL、MapReduce、UDF(Java/Python)、Graph、基於DAG的處理、交互式、內存計算、機器學習等計算類型及MPI迭代類算法。簡化了企業大數據平臺的應用架構。

3、強數據安全
MaxCompute已穩定支撐阿里全部數據倉庫業務9年以上,提供多層沙箱防護、細粒度權限管理及監控。

4、低成本
與企業自建專有云相比,MaxCompute的計算存儲更高效,可以降低30%~50%的採購成本。

5、免運維
基於MaxCompute的Serverless無服務器的設計思路,用戶只需關心作業和數據,而無需關心底層分佈式架構及運維。

6、極致彈性擴展
MaxCompute提供按量付費模式下的作業級別的資源管理。用戶無需受困於資源擴展難題,系統會自動擴展計算、存儲、網絡等資源,最大程度地節省成本。

作爲一名初次使用MaxCompute的用戶,我體會頗深。MaxCompute 開箱即用,擁有集成化的操作界面,你不必關心集羣搭建、配置和運維工作。僅需簡單的點擊鼠標,幾步操作,就可以在MaxCompute中上傳數據,分析數據並得到分析結果。

作爲一種快速、完全託管的 TB/PB 級數據倉庫解決方案,MaxCompute不僅爲我們提供了傳統的命令行操作,而且提供了豐富的web端操作界面。對於數據開發,測試,發佈,數據流,數據權限管理都非常好用,支持python,java的udf,對於複雜的邏輯查詢也支持傳統的MapReduce,同時也支持多種機器學習算法,非常好用。

MaxCompute爲我們提供了統一的項目管理。實際開發中各個團隊都有自己的項目,自己管理自己的項目, 通過項目隔離,有效的防止數據和任務被其他團隊修改和刪除等問題。除非是pro項目任務出錯,否則不會影響到其他業務線的任務,最大程度降低各業務間的影響。

同時,大數據開發套件和 MaxCompute關係緊密,大數據開發套件爲 MaxCompute 提供了一站式的數據同步,任務開發,數據工作流開發,數據管理和數據運維等功能。

當需要處理的數據變得非常多,並且數據發展到足夠複雜的時候,這些數據往往需要用不同的模式進行處理,除此之外,當作業出現問題的時候也需要有足夠好的工具進行分析和管理。這些其實都是對於開發者而言需要面對的問題,與此同時阿里云爲我們提供了DATA IDE環境來解決上述的問題。

在進行數據分析的過程中DATA IDE可以支持SQL的語法以及語法的高亮,同時實現代碼補全等功能。開發者即使對於SQL的語法並不熟悉,但是根據DATA IDE給出的關鍵詞提示也可以輕鬆的進行操作。另外在DATA IDE中可以集成元數據,從而在開發人員進行SQL語句編寫時,給予表格、字段以及函數的提示。

在任務執行過程中,我們通過IDE可以看到作業的執行狀態以及詳細信息,即便是作業出現問題IDE也可以很方便地對於問題進行定位,幫助開發者發現作業中哪一個是瓶頸。

Max Compute還爲我們提供了一個基於雲計算的靈活的輕量級的自助 BI 工具服務平臺-----Quick BI。

Quick BI可以支持多種數據源的添加,以便於我們對不同的數據源進行實時在線分析。

Quick BI爲我們提供了豐富的可視化圖表,根據行業的不同需求我們可以隨意選取,以便於給決策曾提供更清晰準確的報表。而其基於 WEB 頁面的工作環境,拖拽式、類似於 EXCEL 的操作方式,一鍵導入、實時分析,可以靈活切換數據分析的視角,更是錦上添花。

對於完成後的報表圖表,可以以接口方式將製作的報表嵌入到第三方軟件,從而方便自己的分析查詢。

總之,無論是用來學習,還是用來工作MaxCompute都是一個不錯的選擇。時代在進步,科技在發展,大數據的腳步已經離我們越來越近,更多是知識需要我們去學習,去實踐,趕快行動起來加入其中吧。

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章