作者:柯根 更多內容詳見數據中臺官網 https://dp.alibaba.com
從整體上看,數據中臺體系架構可分爲:數據採集層、數據計算層、數據服務層三大層次。通過這三大層次對上層數據應用提供數據支撐。
數據採集層
對於企業來說,每時每刻都在產生海量的數據,數據採集作爲數據體系第一環尤爲重要。
因此在數據採集層需要建立了一套標準的數據採集體系方案,並致力全面、高性能、規範地完成海量數據的採集,將其傳輸到大數據平臺。
互聯網日誌採集體系包括兩大體系:Web端日誌採集技術方案;APP端日誌採集技術方案。
在採集技術之上,企業可以用面向各個場景的埋點規範,來滿足日誌數據打通等多種業務場景。同時,還可以建立了一套高性能、高可靠性的數據傳輸體系完成數據從生產業務端到大數據系統的傳輸;在傳輸方面,採集技術可既包括數據庫的增量數據傳輸,也包括日誌數據
數據中臺交付專家告訴你,數據架構的分層怎樣更加合理?
發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章
京東科技數字化營銷能力的演進與最佳實踐| 京東雲技術團隊
原創
2024-05-07 23:17:11
華爲云云原生FinOps解決方案,釋放雲原生最大價值
原創
2024-04-29 22:33:46
數倉安全:數據脫敏技術深度解析
原創
2024-05-10 23:30:54
以全要素數據資產連接爲核心的數據治理與運營
原創
2024-05-09 13:12:55
【開啓報名】同學看過來,Apache DolphinScheduler開源之夏課題任務正式發佈!
原創
2024-05-09 11:55:30
愛奇藝數據湖實戰 - 實時湖倉一體化
01 概述 數據是洞察用戶、市場、運營決策的基礎資料,在愛奇藝被廣泛應用在推薦、廣告、用戶增長、營銷等場景中。愛奇藝大數據業務之前採用 Lambda 架構,滿足海量
愛奇藝技術產品團隊
2024-05-09 01:18:23
企業IT架構治理之道| 京東雲技術團隊
原創
2024-05-07 23:17:13
01-電商商品中心解密:僅憑SKU真的足夠嗎?
原創
2024-05-07 01:08:03
電子合同一站式解決方案 | 京東雲技術團隊
原創
2024-05-06 23:16:37
巧用 TiCDC Syncpiont 構建銀行實時交易和準實時計算一體化架構
原創
2024-04-30 22:24:58
Apache DolphinScheduler支持Flink嗎?
原創
2024-04-30 11:49:27
淺析MySQL代價模型:告別盲目使用EXPLAIN,提前預知索引優化策略| 京東零售技術團隊
原創
2024-05-10 12:41:34
一招MAX降低10倍,現在它是我的了| 京東零售技術團隊
原創
2024-05-10 12:41:31
詳解數倉的3A安全能力
原創
2024-05-07 10:33:01