支援使用回收站對刪除的任務進行還原,詳情參見:回收站
支援「Kettle呼叫」節點
定時任務中資料預覽介面中:
滑鼠右鍵點選欄位值,出現複製按鈕,可複製欄位值
若欄位值過長,支援拖曳調整列寬
欄位值為空字串時不顯示,為 null 值時顯示為 null
滑鼠左鍵點選欄位值,右側顯示具體欄位值,且提供複製按鈕
詳情請參見:定時任務資料預覽優化
「定時任務」模組支援在視覺化介面使用各個節點和算子進行資料的抽取、轉換和裝載,並可以透過排程管理功能自動運作定時任務,幫助您輕鬆構建離線數倉,保證資料生產的高效穩定。
注:定時任務部分相關概念說明詳情參見:定時任務概念
注:4.1.7.3 及之後版本,定時任務支援開發模式和生產模式,實現程式碼的隔離;開發模式的任務可一鍵發佈上線,將任務發佈為生產模式。詳情請參見:開發模式與生產模式
FineDataLink 資料開發>定時任務模組支援多種資料源,可以將多種來源資料進行資料處理和整合
詳情請參見:定時任務支援的資料源
定時任務中透過「定時任務」存放設計好的業務流程
透過「資料夾」對定時任務進行管理
能力豐富:
提供通用的同步節點,支援跨庫資料同步和對資料進行清洗計算
提供多種腳本類節點,例如呼叫Python 腳本、Shell 腳本等等
提供處理複雜邏輯的流程類節點,可結合通用節點進行復雜邏輯處理。例如條件分支、循環執行、匯出結果傳遞等複雜流程控制
操作簡單:
可透過拖曳組件方式快速實現任務的混合編排
提供智慧化的 SQL 編輯器
FineDataLink 支援的節點類型,詳情請參見本文 2.2 節內容
體驗完善:
血緣分析:可透過血緣分析查看定時任務中的表間關係
生產模式和開發模式:將定時任務的開發編輯區和運作區隔離,所有定時任務的修訂和更改透過在開發編輯區完成除錯和試運作後,透過發佈機制,發佈到穩定的運作環境,保證開發和運作互不影響:開發模式與生產模式
定時任務版本管理:能對定時任務進行版本追溯和退回原任務設定。
任務控制:
支援設定任務逾時限制;是否失敗重跑
支援設定調度任務優先;支援設定任務髒資料容忍情況;支援任務結果通知;支援設定任務日誌等級
調度計劃:
支援設定調度任務的開始日期、執行頻率。
支援設定任務的調度依賴,例如設定任務 A、任務 B 執行成功後再執行任務 C
詳細說明:
更多調度相關說明,詳情請參見調度計劃概述、任務控制概述
支援靈活調度、運作狀態實時監視,方便的操作將會釋放維運人員巨大的工作量
詳細介紹請參見:批量定時任務維運概述
開放能力:提供豐富的OpenAPI,使用者可實現外部系統觸發定時任務等,詳情請參見:呼叫定時任務相關API說明
權限控制:支援介面功能權限及資料存取權限控制。詳情請參見定時任務管理權限
FineDataLink 資料開發>定時任務模組提供多種類型的節點,多種節點配合使用,滿足您不同的資料處理需求。
節點是組成定時任務的基本單位,多個節點透過線條連結後可確定執行流程,進而組成一個完整的定時任務。FineDataLink 目前有如下節點:
可執行資料聯動、同步刪除資料等操作
在APIAPI/本地/SFTP/FTP之間進行檔案下載/上傳,實現檔案行動
注:僅對檔案流本身做同步,而非取檔案內容資料。
滑鼠懸浮至節點列表,會出現節點的用法解譯,使用者可快速查看當前節點任務用法。如下圖所示:
透過手動執行任務,根據任務運作日誌進行任務除錯
定時任務運作日誌介紹
調度計劃概述
任務控制概述
批量定時任務維運概述
負載分配
視覺化展示父子任務層級呼叫關係,使用者可查看該定時任務被哪些任務呼叫,以及該任務呼叫了哪些任務
視覺化展示任務間調度依賴關係,輔助事件調度決策
FineDataLink 支援在「資料轉換概述」的輸入型算子中進行「樣本設定」,即在預覽介面,設定用多少資料去參與運算,便於進行計算後的預覽結果校驗。
4.0.17 版本之前,FineDataLink 忽略對 SQL 語句註釋的處理;4.0.17 及之後版本,SQL 語句的註釋交給資料庫執行。
使用者需注意 SQL 語句註釋的書寫規範:單行註釋之後要有一個空格;Hive 資料源不支援多行註釋。
滑鼠選中內容,快速回饋問題
滑鼠選中存在疑惑的內容,即可快速回饋問題,我們將會跟進處理。
不再提示
10s後關閉
反馈已提交
网络繁忙