python實現數據倉庫的自動化開發
概述前面講了基於元數據驅動數據倉庫的開發，使數據倉庫自動化，可視化。這篇講用python來實現數倉的自動化開發 ,前提是你已經完成了需求調研和數據剖析，開始進行數據建模。自動化程序的流程如下：由於沒有開發前端建模頁面，需要把ods、edw、dm層建模元數據導入到元數據庫裏。 把每層的轉換查詢腳本導入元數據庫。 把源庫表的元數據信息通過python加載到元數據庫裏。 跟據建表模板自動生成每層的DDL語句。 根據程序模板自動生成每層的加載腳本。  .
發表評論
所有評論
還沒有人評論，想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章