作者：品鑑 [ 更多內容詳見數據中臺官網 https://dp.alibaba.com ]
數據中臺門在阿里巴巴集團幹什麼的，由哪個部門掌管？數據中臺在阿里巴巴的主要作用是什麼呢？外面吹噓這麼神祕的數據中臺在阿里實踐的如何呢？今天小編正好要採訪數據技術及產品部門裏面一個老大，帶大家來一探究竟。
剛一開頭，老大就陷入沉思，沉重的說：“數據技術及產品部門在阿里巴巴集團其實已走過16個年頭，掌管着全集團的數據資產，那麼多年的積累，幫助阿里建立起了一套完整的數據體系，對業務有全面的支撐。”整個數據中臺從基礎設施，基礎數據技術起步，到數據資產管理；從內部的數據挖掘到體系規範、標準、流程和體系制定；外部產出從數據可視化技術到數據應用，使得內部的小二從方方面面都感受到數據中臺的真實存在。
數據技術及產品部門歷史
說到數據中臺不能不說阿里的底層基礎架構的紮實程度，數據中臺基於阿里雲的基礎設施，使用了Maxcompute大數據平臺、Analysis database、HBase、ECS等基礎組件，基於這些基礎組件之上，數據技術及產品部門的智慧工程師們開發了數據資產，它管理着全域大數據，統一的數據建設、管理、服務，服務阿里外部千萬用戶和內部業務給全集團小二們方便使用全集團的數據，當然這些都有嚴格的安全和權限管理哦，只有有需要的小二纔可以看到和使用哦！
數據技術及產品部門彙集了各種數據，因此數據官們開發了各種各樣的數據技術幫助業務部門實現快速而準確的數據，大家耳熟能詳的oneID技術、反作弊技術、牛逼的雙十一實時計算大屏技術等都是數據技術及產品部門小二們開發的哦，非常讚的科技！這些牛逼的技術幫助阿里實現了各種場景的對外和對內的數據應用，數據挖掘技術產出幫助阿里小二們更好的對業務作出判斷，實現更好的營銷，對外賦能生意參謀產品，使得商家對天貓和淘寶小店的業主們瞭解自己的生意，生意參謀通過生意背後一盤數據的數據產品服務。基於全渠道數據融合、全鏈路數據產品集成，爲商家提供數據披露、分析、診斷、建議、優化、預測等一站式數據產品服務。目前，生意參謀服務的商家已經超過2000萬，月服務商家超過600萬；在月成交額30萬元以上的商家中，逾90%在使用生意參謀，這可是一個非常高的比例喔！
爲什麼說阿里巴巴本身是雲上數據中臺的最佳實踐
生意參謀截圖
得益於阿里巴巴生態和業務體系，阿里數據沉澱了包括電商交易、搜索、物流、支付、廣告、風控、移動、視頻等種類多樣的高質量數據，因此產生了各種數據應用爲不同的部門和外部客戶提供各種數據服務，採訪領導講，這些應用實在太多了，有爲公司高管決策服務的數據挖掘分析產品；有爲品牌廠商提供人羣分析的品牌銀行數據服務；有爲集團服務的OneID查詢，通過算法和深度挖掘實現的人羣畫像服務；爲其他部門Web或App端開發規範和數據採集的數據埋點和採集系統；甚至還有爲阿里雲的用戶實現敏捷報表開發的QuickBI產品…，哎呀呀，什麼生意參謀、quickBI，Dataphin、FBI、可視化埋點、品牌銀行、企業參謀，數據質量，數據資產…巴拉巴拉幾十個名字，一大串數據產品名字，小編快記不過來，臨了領導還提醒小編要保密哦。不過最後小編看到一個叫阿里數據的產品，印象深刻，這可真是一個寶貝，讓小編有”一機在手，全盤掌握”的感覺。
很多人都以爲數據技術及產品部門是一個ETL或數據處理部門，其實數據技術及產品部門大部分人都是碼農哦，他們用最新的技術打造最好用的數據，大家都知道開源的流處理Flink吧，它是流處理技術的後期之秀哦，現在看幾乎已經要打敗sparkstreaming，storm等前輩，之所以被碼農們普遍接受，很重要一點就是阿里的工程師在flink上實現了SQL編程，貢獻給社區，讓流計算開發變得簡單、易用。這些阿里貢獻給社區的還有很多，比如DataX，Hadoop等，另一塊大家看的眼饞的是數據可視化技術、阿里利用最新的Web端技術、2D、3D的自由發揮，大規模的數據量繪製，藉助圖形化手段，清晰有效的出阿達數據意義，這塊在阿里雙十一零點那刻發揮的淋漓盡致。
爲什麼說阿里巴巴本身是雲上數據中臺的最佳實踐
雙11全球狂歡節數據屏
數據技術及產品部門不僅數據應用和數據產品做得好，阿里還非常重視體系，組織和標準化的建設，你要知道阿里巴巴是一個10萬人的大經濟體，阿里的數據服務涵蓋所有部門，因此標準、數據規範、採、建、管、控、用的流程非常重要，需要有一個體系，一整套標準來保障阿里數據運行和業務發展，這套標準體系可是阿里的寶貝，不輕易對外的。
數據技術及產品部門除了產品做的好、數據質量高外，也不是一個封閉固步自封的小團體，他還非常重視數據生態圈建設，以開放、分享、賦能爲己任，以開放、分享的心態，將阿里在大數據上沉澱多年的經驗和能力，賦予阿里外部千萬用戶和內部業務，幫助商家、中小創業者、傳統企業等共同發展、繁榮，與很多院校建立了聯繫，部分成果開源社區，讓大家來分享大家的成功，如果大家想也建設一套數據中臺，可以看一下Dataphin、QuickBI、企業參謀、可視化埋點採集系統，這些都是數據技術及產品部門通過阿里雲輸出的標準產品，海底撈，飛鶴、南方航空、大潤發等一大波企業已經在用了哦！
除了基礎、技術、產品、數據、標準外，數據技術及產品部門形成一套數據中臺方法論體系，OneData數據中臺是其中一個高度概括，它解決了IT部門數據開發的高人力成本、數據錯誤、浪費資源、雜亂無章、效率低下等這些經常出現的問題，OneData都能輕鬆解決，說到這裏，小編覺得其實外面說的大數據平臺落地難，實施難其實最缺乏的就是阿里的OneData數據中臺啊！
總之，數據技術及產品部門依託於豐富的數據資產和強大的技術能力和對數據分析、挖掘能力，充分應用到實際業務中。通過算法，深度挖掘人羣畫像等，並沉澱出一系列優質數據，爲阿里的業務創新應用提供數據決策基礎和依據。爲阿里發揮大數據的價值奠定堅實基礎。
結尾： [ 更多內容詳見數據中臺官網 https://dp.alibaba.com ]
阿里巴巴數據中臺團隊，致力於輸出阿里雲數據智能的最佳實踐，助力每個企業建設自己的數據中臺，進而共同實現新時代下的智能商業！
阿里巴巴數據中臺解決方案，核心產品：
· Dataphin，以阿里巴巴大數據核心方法論OneData爲內核驅動，提供一站式數據構建與管理能力；
· Quick BI，集阿里巴巴數據分析經驗沉澱，提供一站式數據分析與展現能力；
· Quick Audience，集阿里巴巴消費者洞察及營銷經驗，提供一站式人羣圈選、洞察及營銷投放能力，連接阿里巴巴商業，實現用戶增長。
歡迎志同道合者一起成長！
作者：伴弋
原文鏈接：https://yq.aliyun.com/articles/720863?utm_content=g_1000083376
本文爲雲棲社區原創內容，未經允許不得轉載。