大數據之路讀書筆記

總述

• 人類正從IT時代走向DT時代

1、數據採集層
數據從生產業務端到大數據系統的傳輸

2、數據計算層
離線計算平臺和實時計算平臺

• 數據整合和管理體系
• 作用：構建統一、規範、可共享的全域數據體系，避免數據的冗餘和重複建設，規避數據煙囪和不一致性。
  構建數據公共層，幫助相似大數據項目快速落地。
• 數據加工鏈路——分層理念

3、數據服務層
數據消費，通過API提供數據服務
集團用戶識別，用戶畫像等複雜數據查詢服務，實時數據推送服務

4、數據應用層
通過應用提供給用戶，讓數據發揮價值