作者:柯根 更多内容详见数据中台官网 https://dp.alibaba.com
从整体上看,数据中台体系架构可分为:数据采集层、数据计算层、数据服务层三大层次。通过这三大层次对上层数据应用提供数据支撑。
数据采集层
对于企业来说,每时每刻都在产生海量的数据,数据采集作为数据体系第一环尤为重要。
因此在数据采集层需要建立了一套标准的数据采集体系方案,并致力全面、高性能、规范地完成海量数据的采集,将其传输到大数据平台。
互联网日志采集体系包括两大体系:Web端日志采集技术方案;APP端日志采集技术方案。
在采集技术之上,企业可以用面向各个场景的埋点规范,来满足日志数据打通等多种业务场景。同时,还可以建立了一套高性能、高可靠性的数据传输体系完成数据从生产业务端到大数据系统的传输;在传输方面,采集技术可既包括数据库的增量数据传输,也包括日志数据
数据中台交付专家告诉你,数据架构的分层怎样更加合理?
發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章
京东科技数字化营销能力的演进与最佳实践| 京东云技术团队
原創
2024-05-07 23:17:11
神策数据:详解保险 OMO 一体化的关键步骤
原創
2024-05-11 22:04:29
数仓安全:数据脱敏技术深度解析
原創
2024-05-10 23:30:54
以全要素数据资产连接为核心的数据治理与运营
原創
2024-05-09 13:12:55
【开启报名】同学看过来,Apache DolphinScheduler开源之夏课题任务正式发布!
原創
2024-05-09 11:55:30
爱奇艺数据湖实战 - 实时湖仓一体化
01 概述 數據是洞察用戶、市場、運營決策的基礎資料,在愛奇藝被廣泛應用在推薦、廣告、用戶增長、營銷等場景中。愛奇藝大數據業務之前採用 Lambda 架構,滿足海量
愛奇藝技術產品團隊
2024-05-09 01:18:23
企业IT架构治理之道| 京东云技术团队
原創
2024-05-07 23:17:13
01-电商商品中心解密:仅凭SKU真的足够吗?
原創
2024-05-07 01:08:03
电子合同一站式解决方案 | 京东云技术团队
原創
2024-05-06 23:16:37
巧用 TiCDC Syncpiont 构建银行实时交易和准实时计算一体化架构
原創
2024-04-30 22:24:58
Apache DolphinScheduler支持Flink吗?
原創
2024-04-30 11:49:27
浅析MySQL代价模型:告别盲目使用EXPLAIN,提前预知索引优化策略| 京东零售技术团队
原創
2024-05-10 12:41:34
一招MAX降低10倍,现在它是我的了| 京东零售技术团队
原創
2024-05-10 12:41:31
详解数仓的3A安全能力
原創
2024-05-07 10:33:01