定時任務併發數與髒資料說明

定時任務運行時若遇到髒數據，任務會報錯并終止。本文說明如何查看髒數據産生的原因及如何處理髒數據。

注：實時管道任務的髒數據說明請參見：實時管道任務處理髒數據

1）定時任務運行時，若存在髒數據，日志中将會報錯。如下圖所示：

注：建議将 日志等級 設置爲 INFO，日志信息會更加詳細。

「統計」Tab頁下，可看到髒資料具體條數，點選條數，可看到錯誤類型和錯誤原因。如下圖所示：

2）用戶若想查看到所有髒數據的所有信息，可到%FDL_HOME%\logs\fanruan.log文件中進行查看。

3）用戶若想遇到髒數據就通知給指定用戶，可在結果通知中勾選「髒數據通知」按鈕。如下圖所示：

詳情請參見：任務控制-結果通知

4.1 忽略髒數據

若用戶希望任務具有一定容錯性，即遇到髒數據任務繼續運行，不進行報錯，運行狀态爲成功，且髒數據不寫入到目标表中（正常的數據會順利寫入到目标表中），可設置髒數據阈值（輸入範圍爲1~1萬）。如下圖所示：

詳情請參見：任務控制-容錯機制

注：若不配置「髒數據容忍」，只要遇到髒數據就會導緻任務失敗。

若髒數據條數未超過阈值（最大可設置爲10000），日志信息如下：

髒數據條數超出髒數據阈值後，任務會報錯。

4.2 髒數據處理後寫入到目标表

用戶若希望髒數據寫入到目标表，需要根據日志排查髒數據出現原因，修正後重新運行任務或者 重試任務

産生髒數據後，重試任務的處理場景：