Greenplum数据源使用说明

1）無論是否配置「並行裝載設定」項，在進行資料開發時，要注意大小寫規範，最好是統一為大寫格式，否則會出現報錯；比如在進行資料查詢時，將查詢內容統一大小寫或者將查詢內容加引號。

2）在 Greenplum 資料庫中，欄位名的長度限制：

• 最大 64 個字元；若使用英文字母、數字或底線，最多可支援 64 個字元；若包含中文字元（每個漢字佔 2-4 個字元），實際字元數會減少。

• 建議使用小寫字母、數字、底線組合來命名；避免以數字開頭或包含特殊字元。

資料來源

支援定時任務讀取資料庫的分割槽表，如下圖所示：

資料去向與映射

1）定時任務支援選擇分割槽表作為資料去向，如下圖所示：

2）4.1.9.3 及之後的版本，目標表為自動建表時，支援指定分佈鍵。

3）4.1.9.3 及之後的版本，定時任務自動建表設定主鍵後，點選「分割槽鍵設定」按鈕，支援指定分割槽鍵。如下圖所示：

注：僅支援一級分割槽。

注：5.x、6.x 支援範圍分割槽和列表分割槽；GP7 額外支援哈希分割槽，所有分割槽方式，僅支援一個欄位作為分割槽欄位（GPORCA不支援）。

配置方式參見讀取、建立、寫入分割槽表，有如下差別：

• 範圍分割槽和列表分割槽分割槽名稱支援為空，為空時按照位置自動取名（相當於不指定名稱，資料庫會自動取名，不需要FDL處理）

• 範圍分割槽有兩種方式來指定範圍（支援指定包含或不包含）

1）方式一：起始值和結束值必填，在起始結束值都合法的時候，才支援指定間隔，來自動劃分分割槽，舉例：「start (date '2015-01-01') end (date '2020-12-31') every (interval '1 year')」

      欄位類型為日期時，間隔支援指定年月日

      欄位類型為數字時，間隔支援指定正整數

2）方式二：單獨指定「大於等於XXX」「小於等於XXX」條件

注：方式一和方式二指定的分割槽允許共存。

支援指定預設分割槽。

寫入方式

定時任務中設定資料匯出到 Greenplum 資料庫時。「寫入方式」介面如下圖所示：

1）「裝載方式」介紹如下表所示：

定時任務中特殊場景說明：

2）4.2.7.4 及之後版本，目標端為 GreenPlum 時，支援 交易控制 功能。

1）4.1.1 及之後版本，Greenplum 資料源作為目標表，支援 無主鍵同步

2）資料管道任務中支援寫入至 Greenplum 資料庫。管道任務配置請參見：資料管道概述

3）4.1.9.3 及之後的版本，管道任務自動建表支援指定分割槽鍵。如下圖所示：

4）管道任務目標端為 Greenplum 時，若目標表為手動建立的且包含時間戳欄位（記錄資料在資料庫中實際新增和更新的時間），需要給時間戳欄位設定個預設值：（(EXTRACT(EPOCH FROM CURRENT_TIMESTAMP) * 1000)::bigint），否則增量後時間戳欄位會為空。

5）4.0.29 及之後版本，Greenplum、Greenplum（並行裝載）作為目標端同步優化：當資料透過COPY裝載失敗時，重新使用JDBC裝載，重新裝載再失敗時，識別為髒資料，並正常記錄，以保證資料正常。

6）資料管道使用 Greenplum 或者 Greenplum（並行裝載）作為目標表時，都是用的 COPY 裝載模式，需要在目標資料庫先建立 fdl_temp 模式用來存放臨時表，因此需要給該資料連結帳號賦予在對應資料庫建立模式的權限。詳情參見：配置Greenplum資料源

資料服務支援 Greenplum 資料庫，但需要配置「並行裝載設定」項。資料服務請參見：資料服務概述

4.1.9.3 及之後的版本，資料服務支援選擇分割槽表作為資料來源，如下圖所示：

1）4.2.19.3 及之後版本，定時管道支援寫入該資料庫。

2）4.2.20.1 及之後版本，配置定時管道任務&Greenplum作為目標端時，支援開啟「同步源表結構變化」按鈕，詳情請參見：自動同步