4.2.7 更新日誌

  • 文檔創建者:Laurenwy
  • 編輯次數:3
  • 最近更新:Laurenwy 于 2025-06-30
  • 相容說明

    小於等於 3.9.0 的 Kafka 版本,檢查出編號為CVE-2025-27817、CVE-2025-27818、CVE-2025-27819 的非高危漏洞,需要參考 部署Kafka:KRaft模式 進行解決。

    4.2.7.4

    資料轉換支援分流處理資料

    優化前:

    • 資料分發時,僅有一個匯出環節且僅在匯出時分流;使用者想對同一資料來源進行不同處理(如拆分主子表、分組匯總等)分別匯出時,需要借用中間表且拆成兩個資料轉換任務重新寫相同的前置處理邏輯,實現過程較麻煩。

    • 日誌資訊不顯示存在多流,統計資訊分別顯示多個匯出。

    優化後:

    1)在一個「資料轉換」節點裏支援資料的分流處理和匯出。如下圖所示:

    詳情請參見:算子連線規則

    2)支援查看「資料轉換」節點內的日誌和統計。如下圖所示:

    詳情請參見:任務日誌

    DB表交易匯出做成標準功能

    DB匯出(事務)  算子功能合併至「DB表匯出」、「資料同步-寫入方式」中。如下圖所示:

    清空目標表再寫入資料邏輯優化

    清表全寫時,使用者期望減少目標庫資料的空檔期,以及避免清表全寫時,清表成功,寫數失敗。

    因此本次版本寫入方式選擇「清空目標表,再寫入資料」時,新增清表方式和主鍵沖突策略。如下圖所示:

    詳情請參見:資料同步-寫入方式

    適配SelectDB 3.0版本

    FineDataLink 適配 SelectDB 3.0 版本。

    4.2.7.3

    血緣分析適配更多資料源&體驗優化

    詳情請參見:血緣分析

    1)來源端為「SQL」配置項時,血緣分析新增適配資料源:db2、sqlite、Hsql、Informix、達夢、KingBase、TiDB、ClickHouse、PolarDB PostgreSQL、Presto、Gaussdb 200、Gbase8a、阿裏雲MaxCompute(odps)。

    2)管道任務血緣優化:

    優化前:

    表 A 為管道任務的來源端,點選表 A 的血緣查看,管道任務的所有目標表都展示出來。

    優化後:

    只會展示表 A 對應的目標表(僅會展示一一對應的表關系,是否開啟「旁系血緣」按鈕都為該邏輯)。

    3)INSERT 文法解析優化:

    優化前:

    暫不支援解析來源目標端,僅解析為引用關系。

    優化後:

    支援解析來源目標端。

    資料服務、定時任務讀寫、實時管道寫支援Doris&StarRocks分割槽表

    詳情請參見:Doris資料源使用說明StarRocks資料源使用說明

    1)定時任務、資料服務支援讀取 Doris&StarRocks 分割槽表。

    2)定時任務、管道任務支援寫入 Doris、StarRocks 資料庫的分割槽表。如下圖所示:

    3)定時任務、管道任務目標表為自動建表時,支援指定分割槽鍵。如下圖所示:

    4.2.7.2 

    適配 GaussDB 100/GaussDB T 資料源

    FineDataLink 支援連結 GaussDB 100/GaussDB T 資料源,適配功能:

    • 定時任務讀取和寫入

    • 實時任務寫入

    • 資料管道任務寫入

    • 資料服務功能

    • 庫表管理功能

    詳情請參見:配置 GaussDB 100/GaussDB T 資料源

    支援飛書訊息卡片通知

    飛書應用推播、飛書群機器人渠道中,支援訊息卡片通知,豐富了通知形式。

    此外,優化了 Markdown 格式訊息的顯示效果,提升通知內容的可讀性。

    詳情參見文檔:訊息通知

    附件列表


    主題: 更新動態
    已經是第一篇
    已經是最後一篇
    • 有幫助
    • 沒幫助
    • 只是瀏覽
    • 评价文档,奖励 1 ~ 100 随机 F 豆!