項目需要增量同步數據,實現如下邏輯:
現將表中的數據全部同步到目標表,然後再將全部數據的最新時間,更新到時間同步配置表中。
操作步驟如下:
1)主作業主要轉換(獲取最後更新時間、增量同步記錄數據並更新同步時間到配置表)
2)同步數據並更新記錄最新時間到同步表中
阻塞數據知道步驟都完成,是爲了等待需要同步的數據全部同步完成後,在執行更新記錄最新時間到同步表中。
PS:阻塞數據 組件需要有後續步驟連接,否則不能選擇出需要阻塞的步驟。
項目需要增量同步數據,實現如下邏輯:
現將表中的數據全部同步到目標表,然後再將全部數據的最新時間,更新到時間同步配置表中。
操作步驟如下:
1)主作業主要轉換(獲取最後更新時間、增量同步記錄數據並更新同步時間到配置表)
2)同步數據並更新記錄最新時間到同步表中
阻塞數據知道步驟都完成,是爲了等待需要同步的數據全部同步完成後,在執行更新記錄最新時間到同步表中。
PS:阻塞數據 組件需要有後續步驟連接,否則不能選擇出需要阻塞的步驟。
某一類表格的導入的控制流大體如下: 1、 執行SQL任務,找到本地文件夾中未被處理過的最新的表 2、 Foreach循環容器:重複包中的任務 3、執行SQL任務:刪除數據庫中的原表