配置實時管道任務-任務控制

1.1 版本

1.2 歷史版本更新

1.2 功能簡介

設定來源表目標表映射關系後，即可對實時管道任務進行任務執行控制。如下圖所示：

2.1 單表髒資料臨界值

注1：限制最多10w行，且處理髒資料後，會重置臨界值統計。

注2：若需要對産生的髒資料進行處理，詳情參見：管道任務處理髒資料

管道任務中單表髒資料達到表髒資料臨界值後，任務會異常中止。

2.2 設定失敗重試

若管道任務、管道任務包含的表由於當時的網路波動或者其他原因，運作中斷，過段時間網路即可恢複正常，希望可自動重新運作，可在「失敗重試」中設定重跑次數和間隔時間。

具體說明如下表所示：

2.3 設定結果通知

可設定當任務異常時的通知。如下圖所示：

注1：結果通知中勾選源表結構變化相關介紹詳情參見：資料管道-同步源表結構變化

注2：單個管道任務失敗的通知限制為 10s 一次。

2.3.1 通知內容

4.2.1.1 及之後版本，任務或表失敗重試時可進行通知。

2.3.2 平台/郵件/簡訊說明

• 當通知渠道為簡訊/郵件/平台渠道時：基於平台體系配置通知物件，通知物件可選擇平台使用者、部門、角色，三者取並集。

• 通知渠道選擇簡訊/信箱時，「自訂收件人」與「平台使用者組」不能同時為空；其中，「自訂收件人」不支援引用參數。

• 通知渠道選擇簡訊/信箱時，「平台使用者組」中選擇了 A 使用者，自訂收件人中也設定了 A 使用者，不做重複通知。

2.3.3 釘釘/飛書/企業微信設定說明

通知渠道選擇「使用者端」時，可設定通知渠道為釘釘群機器人/飛書群機器人/企業微信群機器人。

注：一個通知渠道中，Webhook 地址不支援填寫多個。

釘釘群機器人 Webhook 地址：可參考 自訂機器人接入

飛書群機器人 Webhook 地址：自訂機器人使用指南

企業微信群機器人 Webhook 地址：新增群機器人步驟如下圖所示，機器人新增成功的提示頁面上會有 webhook 地址：

2.4 設定日誌等級

可為管道任務單獨設定日誌匯出級別，滿足使用者按需查看日誌、除錯和排錯的需求；可以在更細粒度的日誌等級裏，列印詳細的日誌，供使用者查看。

如下圖所示：

注：4.2.1.2 及之後版本，建立管道任務時，日誌等級預設設定為 INFO。

1）匯出的日誌說明：管道任務：讀寫程式日誌\異常和錯誤日誌。

2）預設不開啟，未開啟時使用 全局設定的業務日誌等級記錄日誌，全局日誌等級預設為 WARN。

3）僅在管道未處於運作狀態時可以配置，啟動後生效。

4）日誌級別可選擇 ERROR、WARN、INFO。

• 日誌級別大小排序（嚴重程度）：ERROR>WARN>INFO

• 日誌詳細程度排序：ERROR<WARN<INFO

5）調整單個管道任務的日誌匯出級別後，若修改了全局的日誌級別，全局日誌的級別不會影響手動修改過日誌等級任務的級別。

1）點選「啟動所有表」按鈕，實時同步所有來源表。如下圖所示：

2）進行任務維運管理：單個管道任務管理、管道任務維運

3）實時管道任務運作一段時間後，若想修改任務配置，請參見：管理實時管道任務