使用者希望透過定時管道任務完成應用資料源取數後,立即觸發後續資料加工處理流程,保障資料同步與加工環節的連貫銜接。
定時任務中新增「呼叫定時管道」節點,可在定時任務中呼叫 定時管道任務 。如下圖所示:
使用者需註冊「定時管道」功能點。
使用者每天使用定時管道任務獲取領星資料,在定時任務中進行資料處理後匯出至對應的資料庫中。
定時管道任務詳細說明請參見:配置定時管道任務
1)建立定時管道任務。
2)將領星資料源的部分表同步至 MySQL 資料庫中。如下圖所示:
注:若定時管道任務目標表為自動建表,建議先運作一次定時管道任務,再設計定時任務,便於定時任務中選擇目標表進行後續處理。
1)建立定時任務。
2)拖入「呼叫定時管道」節點,呼叫 2.1 節建立的定時管道任務。如下圖所示:
配置項說明如下表所示:
僅支援選擇非草稿狀態的定時管道任務
點選「查看」可以快速查看當前任務的同步配置
資料同步起點
(僅對增量表生效)
任務當前斷點:從任務當前斷點位置運作,將同步當前斷點後的所有增量資料
自訂斷點:支援選擇固定日期或引用參數,運作時將同步斷點後的所有增量資料
3)在「呼叫定時管道」節點後,連結「資料轉換」節點。如下圖所示:
4)在「資料轉換」節點內,將定時管道任務的目標表作為輸入表,對資料表進行加工處理後匯出。如下圖所示:
5)為定時任務設定執行頻率。
1)點選「運作」按鈕,運作定時任務。任務運作後,可單獨查看「呼叫定時管道」節點的日誌。如下圖所示:
「呼叫定時管道」節點內有多張表,運作結果如下表所示:
2)點選「查看日誌」按鈕,跳轉到檢查任務的運作記錄頁面,查看檢查任務運作結果。如下圖所示:
滑鼠選中內容,快速回饋問題
滑鼠選中存在疑惑的內容,即可快速回饋問題,我們將會跟進處理。
不再提示
10s後關閉
反馈已提交
网络繁忙