全量表、增量表、快照表

mysql中的數據:

20190723:A B C 

20190724:A B C D E 

20190725:A B C D E F 

全量表:

20190723:A B C 

20190724:A B C D E

20190725:A B C D E F 

增量表:

20190724: D E

20190725: F 

快照表:

20190723:A B C 

20190724:A B C D E

20190725:A B C D E F 

 

全量表(hive庫 origindb):全量表無分區,表中的數據是截止到前一天的mysql數據。

增量表(hive庫 origindb_delta):按天分區,沒一天的分區會存放mysql在那一天所產生的增量數據。

快照表(hive庫 origindb_ss):按天進行分區,每一天的數據都是截止到那一天的mysql全量數據

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章