ETL作業節點

離線同步
參數相關
"ETL作業節點" 分類下的文檔該分類下有7篇文檔创建该分类下的文档
SQL指令碼
文檔創建者:Gloria.Gao      創建時間:10-18 16:14      標籤:      編輯:1次    |   瀏覽:298次

摘要:一、概述當使用者和需要資料庫內的資料表進行處理時,例如:建立、更新、刪除、讀取、關聯、彙總等操作時,可以使用到 SQL 指令碼節點。本文將介紹資料開發中使用【SQL指令碼】建立新表、並對表資料進行分組彙[閱讀全文:]

參數賦值
文檔創建者:Gloria.Gao      創建時間:10-18 17:21      標籤:      編輯:2次    |   瀏覽:318次

摘要:一、概述使用者希望上遊節點執行的結果,能夠被下遊節點中的 SQL 語句使用。我們可以透過參數承載上遊節點執行的結果,然後在下遊節點中使用該結果。本文將演示在上遊中已篩選出銷售數量大於 100 的水果,並[閱讀全文:]

資料來源型別為RestAPI
文檔創建者:Gloria.Gao      創建時間:10-18 16:03      標籤:      編輯:2次    |   瀏覽:301次

摘要:一、概述出於安全考慮,在資料庫不允許被直接訪問的情况下,支援以 API 的形式進行資料的接收與抽取。二、操作步驟。1建立任務。在數據平臺中創建一個任務,點選【數據平台】→【ETL作業】→【資料開發】→【[閱讀全文:]

離線同步
文檔創建者:Gloria.Gao      創建時間:10-18 15:28      標籤:      編輯:4次    |   瀏覽:332次

摘要:一、概述當使用者需要將資料從一個資料庫抽取到另一個資料庫時,就可以使用離線同步節點。二、操作步驟1建立任務。在數據平臺中創建一個任務,點選【數據平台】→【ETL作業】→【資料開發】→【任務列表】→【ET[閱讀全文:]

虛擬節點
文檔創建者:Gloria.Gao      創建時間:10-18 17:32      標籤:      編輯:0次    |   瀏覽:332次

摘要:一、概述ETL作業中,若使用者希望實現節點之間的並行關係,可藉助【虛擬節點】來完成此邏輯。【虛擬節點】無法配置實際內容,主要是用於輔助多分支到多分支場景的實現。本文將介紹使用者實現A 節點和 B 節點同[閱讀全文:]

自定義參數
文檔創建者:Gloria.Gao      創建時間:10-18 16:23      標籤:      編輯:7次    |   瀏覽:291次

摘要:一、概述在實際場景中,使用者難免會需要應對一些變化,就需要去編寫一些變數。只通過語句編寫參數變數會比較複雜,而本章將介紹 ETL 作業中快捷高效的自定義參數的方法。使用者可以自定義【時間參數】和【常量參[閱讀全文:]

內建參數${cyctime}
文檔創建者:Gloria.Gao      創建時間:10-18 17:05      標籤:      編輯:1次    |   瀏覽:358次

摘要:一、概述內建參數${cyctime}為任務在排程配置中設定的每次執行的時間節點,格式為yyyy-mm-dd hh:mm:ss。本文將介紹使用內建參數 ${cyctime},實現每次運行任務時,[閱讀全文:]