1. 版本
FineDataLink 版本 | 功能變動 |
---|---|
1.5 | 數據輸入适配 API |
4.2.0.3 | 針對 OceanBase(Oracle模式)數據源:
|
4.2.1.2 | 數據開發定時任務讀取支持 InfluxDB 數據庫、TDengine 數據庫 |
4.2.1.4 | 針對 OceanBase(MySQL模式模式)數據源:
針對星環 ArgoDB 數據源:
|
4.2.2.1 | 支持連接 SelectDB 數據源,适配功能:
|
4.2.2.3 | 數據管道源端适配 Oracle 21c |
4.2.3.3 | 支持連接 InterSystems IRIS 數據源,适配功能:
|
查看历史版本更新
FineDataLink版本 | 功能變動 |
---|---|
2.2 | 數據輸入适配服務器數據集 |
3.2 | 數據輸入适配 IBM DB2、ClickHouse、HSQL、Presto、雲端Swift |
3.5 | 數據輸入适配 Impala |
3.5.2 | 數據輸入适配 Sap Hana 數據輸出适配 Sap Hana |
3.6.2 | 數據輸出适配 db2 |
3.7 | 數據輸出适配 clickhouse |
4.0.1.1 | 數據輸出适配 Impala |
4.0.3 | 數據輸入适配 Informix 數據輸出适配 Informix |
4.0.4 | 數據輸入适配 Greenplum、Greenplum(并行裝載) 數據輸出适配 Greenplum、Greenplum(并行裝載) |
4.0.4.2 | 數據輸入适配 Hive 數據輸入适配 MongoDB |
4.0.7 | 數據管道輸入适配SQL server、Oracle 數據管道輸出适配SQL server 數據輸入适配達夢 |
4.0.8 | 數據管道輸出适配 GaussDB 200 數據輸入、輸出适配GaussDB 200 |
4.0.9 | 數據管道輸出适配Oracle 、PostgreSQL |
4.0.10 | 數據開發中輸出适配 Gbase 8A 數據開發中輸入适配 SAP RFC |
4.0.11 | 數據管道輸入适配PostgreSQL 數據開發輸出适配 Hive 數據開發中輸入适配 Gbase 8A |
4.0.14 | 數據開發中輸入支持 FTP、SFTP |
4.0.15 | 數據管道輸出适配 Greenplum、Greenplum(并行裝載) 數據開發輸入輸出适配 KingbaseES V8 |
4.0.18 | 支持 Oracle18c、19c 、Oracle RAC集群作爲數據管道任務讀取數據源 |
4.0.20 | 數據開發讀寫适配HP Vertica |
4.0.20.1 | 數據管道輸入支持 Kafka |
4.0.23 | 定時任務輸入輸出支持 Doris 管道任務數據輸出支持 Doris |
4.0.24 | 定時任務輸入輸出支持TRANSWARP INCEPTOR、StarRocks 管道任務數據輸出支持StarRocks |
4.0.26 | 定時任務輸入支持 MaxCompute |
4.0.27 | 定時任務支持讀取FineBI「公共數據」 數據服務支持讀取FineBI「公共數據」 |
4.0.28 | 定時任務支持讀取和寫入 TiDB 數據庫 管道任務支持寫入至 TiDB 數據庫 管道任務支持寫入至 ClickHouse 管道任務支持寫入至Amazon Redshift 定時任務支持讀取和寫入 Amazon Redshift 管道任務支持寫入至 SeaboxMPP 數據庫 |
4.1 | 注冊功能點調整 數據服務支持Doris\Impala\TiDB\星環數據源 |
4.1.2 | 數據服務支持 StarRocks、GaussDB、MaxCompute 數據源 新增插件類型數據源-通用JDBC |
4.1.3 | 數據服務支持 DB2 數據源 |
4.1.4 |
|
4.1.5.3 | 數據開發支持讀取 SAP Sybase ASE數據源 |
4.1.5.4 | 數據開發支持讀取 SAP HANA V2.0數據源 |
4.1.5.5 | 定時任務中支持讀取和寫入 SeaboxMPP 數據庫 |
4.1.6.1 | 管道任務支持寫入達夢數據庫 |
4.1.6.3 | 定時任務支持讀取 Gbase 8s 數據庫 數據服務支持 GBase8s、KingbaseES、ClickHouse、HANA、達夢、Vertica 數據源 |
4.1.6.4 | 定時任務支持寫入 MongoDB |
4.1.7.3 | 管道任務支持寫入 HANA |
4.1.8.2 | 定時任務支持讀取和寫入神通數據庫 管道任務支持寫入神通數據庫 數據服務支持讀取神通數據庫 |
4.1.8.3 | 适配Impala 3.4、Impala 4.1 |
4.1.10.4 | 數據管道來源端支持 MySQL5.5 |
4.1.11.2 | 定時任務支持讀取和寫入 YMatrix 數據庫 管道任務支持寫入 YMatrix 數據庫 數據服務支持讀取 YMatrix 數據庫 庫表管理模塊支持 YMatrix 數據庫 |
4.1.11.3 | 定時任務支持讀取和寫入 PolarDB PostgreSQL 數據庫 管道任務支持寫入 PolarDB PostgreSQL 數據庫 數據服務支持讀取 PolarDB PostgreSQL 數據庫 庫表管理功能支持 PolarDB PostgreSQL 數據庫 定時任務支持寫入 Elasticsearch 數據源 |
4.1.11.4 | 定時任務支持寫入 MaxCompute 數據源 定時任務支持讀取 FineLogDB(FDL) 數據源 新增實時任務支持的數據源 |
4.1.13.2 | 數據開發-實時任務支持讀取 MQTT 數據源、IBM MQ數據源 數據開發-定時任務支持讀取和寫入 Amazon S3 數據源 |
4.1.13.3 | 數據開發-實時任務寫入支持 ClickHouse 數據開發-定時任務中的「數據同步」節點,支持從應用數據平台中讀取數據 |
4.2.0.1 | 定時任務讀取和寫入适配 openGauss 庫表管理功能支持 openGauss |
4.2.0.2 |
|
2. 數據管道支持的數據源類型
FineDataLink-數據管道,實時數據同步支持的數據源類型如下表所示:
一級分類 | 二級分類 | 數據源 | 讀取 | 寫入 | 環境準備 | 日志解析方式 | DDL支持情況 |
---|---|---|---|---|---|---|---|
高階數據源 | Mysql(Binlog) | MySQL | MySQL 5.5及以上的非只讀數據庫 | MySQL 5.6及以上的非只讀數據庫 | MySQL環境準備 | Binlog | 數據管道DDL支持數據源範圍 |
SQL Server(CDC) | SQL Server | 企業版(Enterprise Edition) 2008 2012 2014 2016 2017 2019 标準版(Standard) 2016 SP1 2017 2019 | 2000 2005 2008 2012 2014 2016 2017 2019 | SQL Server 環境準備 | CDC | ||
Oracle(Logminer) | Oracle | Oracle 10g 11g 12c 18c 19c 21c Oracle RAC集群 | Oracle 10g 11g 12c 18c 19c Oracle RAC集群 | Oracle 環境準備 | LogMiner | ||
PostgreSQL(wal2json) | PostgreSQL | PostgreSQL 9.4以及以上版本 | postgresql_9.4.7 9.5.0 | PostgreSQL環境準備 | wal2json | ||
消息隊列 | Kafka | 0.10.2到3.4 | 暫不支持 | ||||
Db2(CDC) | Db2 | 9.x、10.x、11.x | 暫不支持 | DB2 環境準備 | CDC | ||
SAP HANA | SAP HANA | 2.0 SPS00~SPS07 | 2.0 SPS00~SPS07 | SAP HANA 環境準備 | 觸發器 | ||
進階數據源 | 進階-大數據 | GaussDB 200 | 暫不支持 | GaussDB 200 | |||
Greenplum | 暫不支持 | 5.X 和 6.X | Greenplum作爲目标端時,需要數據庫用戶具有CREATE SCHEMA和CREATE TABLE權限。數據裝載時,将新建名爲fdl_temp的模式用於存放臨時表。 | ||||
Doris | 暫不支持 | 0.14及以上版本 | |||||
StarRocks | 暫不支持 | 2.3 以上版本 | |||||
TiDB | 暫不支持 | V5.2.0 V5.2.1 | |||||
ClickHouse | 暫不支持 | 20.1.8.41 | |||||
SelectDB | 暫不支持 | SelectDB Enterprise 2.1.6 | |||||
Amazon Redshift | 暫不支持 | 支持雲上普通版本同時也支持預置集群版本和Serverless版本 | |||||
Apache Impala | 暫不支持 | 支持 Impala 2.2 Impala 2.3 Impala 2.8 Impala 2.9 Impala 2.10 Impala 3.4 Impala 4.1 Impala 2.10 kudu1.5 | |||||
SeaboxMPP | 暫不支持 | 21.0.3.398 | |||||
PolarDB PostgreSQL | 暫不支持 | polarDB Oracle2.0 polarDB pg14 | |||||
星環 ArgoDB | 暫不支持 | ArgoDB 6.0 及以上版本 | |||||
YMatrix | 暫不支持 | 5.X | |||||
基礎數據源 | 基礎數據源 | 達夢 | 暫不支持 | 8.1 | |||
神通數據庫 | 暫不支持 | 7.0 | |||||
OceanBase(Oracle模式) | 暫不支持 | 4.3.3 | |||||
OceanBase(MySQL模式) | 暫不支持 | oceanbase4.3.3.1 企業版-MySQL實例 |
3. 定時任務支持的數據源類型
FineDataLink-數據開發,定時數據同步支持的數據源類型如下表所示:
一級分類 | 二級分類 | 數據源 | 支持的數據庫版本 | 數據讀取 | 數據寫入 |
---|---|---|---|---|---|
基礎數據源 | 基礎數據源 | MySQL | MySQL_5.1 MySQL_5.5 MySQL_5.5.46 MySQL_5.5.5 MySQL_5.6.22 MySQL_5.6.28 MySQL_5.6.29 MySQL_5.6.31 MySQL_5.6.34 MySQL_5.6.35 MySQL_5.7.16 MySQL_6.5 MySQL_8.0 | √ | √ |
Oracle | oracle 9i oracle_9.2 oracle10.2.0 oracle 11g oracle_11g2 oracle_11.2.0.3 oracle_11.2.0.4 oracle_11.2.3 oracle 12c oracle 10g AIX版本 oracle19c | √ | √ | ||
SQL Server | SQL server 2000 SQL server 2005 SQL server 2008 SQL server 2012 SQL server 2014 SQL server 2016 SQL server 2019注:SQL server 2019 支持在4.0.17.1以及之後的FDL版本中使用。 | √ | √ | ||
PostgreSQL | postgresql_9.4.7 9.5.0; | √ | √ | ||
OceanBase(Oracle模式) | 4.3.3 | √ | √ | ||
OceanBase(MySQL模式) | oceanbase4.3.3.1 企業版-MySQL實例 | √ | √ | ||
openGauss | 3.0.0及以上版本 | √ | √ | ||
SQLite | - | √ | √ 注:SQLite 僅爲内部 Demo 數據庫,FDL 集群工程中若使用 SQLite 作爲目标端,節點間數據一緻性會有問題 | ||
HSQL | - | √ | 開發中 | ||
IBM DB2 | DB2_7.2 DB2_8.1 DB2_8.2 DB2_9.7 DB2_10.5 | √ | √ | ||
Informix | V11.7、V11.5、V12.x | √ | √ | ||
InterSystems IRIS | 2023.1.1 | √ | √ | ||
達夢 | 8.1 | √ | √ | ||
SAP HANA | V2.0 | √ | √ | ||
KingbaseES | KingbaseES V8 | √ | √ | ||
神通數據庫 | 7.0 | √ | √ | ||
服務器數據集 | - | √ | 不支持 | ||
公共數據 | - | √ | √ | ||
SAP Sybase ASE | ASE15.7(集群)、16.0(集群)以及12.5(單機)和15.5(單機) | √ | 不支持 | ||
Gbase 8s | 8.7 | √ | 不支持 | ||
FineLogDB(FDL) | - | √ | 不支持 | ||
進階數據源 | 大數據 | Impala | impala 2.2 impala 2.3 impala 2.8 impala 2.9 impala 2.10 impala 2.10 kudu1.5 Impala 3.4 Impala 4.1 Impala 2.10 kudu1.5 | √ | 支持寫入 Impala 數據庫的 Kudu 表 |
ClickHouse | 20.1、22.6 | √ | √ | ||
Presto | Presto_0.152 Presto_0.169 | √ | 開發中 | ||
5.X 和 6.X | √ | √ | |||
PolarDB PostgreSQL | polarDB Oracle2.0 polarDB pg14 | √ | √ | ||
YMatrix | 5.X | √ | √ | ||
Hive | hive_1.1 Hadoop_Hive_1.2 hive2.3 hive2.1.2 hive2.1.1 hive3.3.1 | √ | √ | ||
GaussDB 200 | - | √ | √ | ||
Gbase 8A | - | √ | √ | ||
SelectDB | SelectDB Enterprise 2.1.6 | √ | √ | ||
HP Vertica | V7.2.1-V10.0、 V12.0.3 | √ | √ | ||
Doris | 0.14及以上版本 | √ | √ | ||
TRANSWARP INCEPTOR | V4.6、V4.9.2、V5.2.1、V6.0.2 | √ | √ | ||
星環ArgoDB | V5.2 及以上版本 | √ | √ | ||
StarRocks | 1.19及以上版本 | √ | √ | ||
阿裏雲MaxCompute | MaxCompute JDBC 驅動版本爲 3.2.7 以上 | √ | √ | ||
TiDB | V5.2.0 V5.2.1 | √ | √ | ||
Amazon Redshift | 預置集群版本和Serverless版本 | √ | √ | ||
SeaboxMPP | 21.0.3.398 | √ | √ | ||
NoSQL | MongoDB | 7及以下版本都支持 | √ | √ | |
Elasticsearch | 只支持 7.0 及以上集群和非集群版本 | √ | √ | ||
應用連接器(定時) | 簡道雲 | - | √ | √ | |
SAP ERP | - | √ | 開發中 | ||
應用數據平台 | √ | 不支持 | |||
接口協議(定時) | API | - | √ | √ | |
WebService | - | √ | 開發中 | ||
文件系統 | FTP/SFTP | - | √ | √ | |
本地文件 | - | √ | √ | ||
Amazon S3 | - | √ | √ | ||
時序數據庫 | InfluxDB | 1.x、2.x | √ | 不支持 | |
TDengine | 2.x、3.x | √ | 不支持 |
4. 數據服務支持的數據源
FineDataLink-數據服務支持的數據源類型如下表所示:
一級分類 | 二級分類 | 數據源 | 支持的數據庫版本 |
---|---|---|---|
基礎數據源 | 基礎數據源 | MySQL | MySQL_5.1 MySQL_5.5 MySQL_5.5.46 MySQL_5.5.5 MySQL_5.6.22 MySQL_5.6.28 MySQL_5.6.29 MySQL_5.6.31 MySQL_5.6.34 MySQL_5.6.35MySQL_5.6.37 MySQL_5.7 MySQL_5.7.16 MySQL_6.5 MySQL_8.0 |
Oracle | oracle 9i oracle_9.2 oracle10.2.0 oracle 11g oracle_11g2 oracle_11.2.0.3 oracle_11.2.0.4 oracle_11.2.3 oracle 12c oracle 10g AIX版本 oracle19c | ||
SQL Server | SQL server 2000 SQL server 2005 SQL server 2008 SQL server 2012 SQL server 2014 SQL server 2016 SQL server 2019注:SQL server 2019 支持在4.0.17.1以及之後的FDL版本中使用。 | ||
PostgreSQL | postgresql_9.4.7 9.5.0 | ||
OceanBase(Oracle模式) | 4.3.3 | ||
OceanBase(MySQL模式) | oceanbase4.3.3.1 企業版-MySQL實例 | ||
FineBI 公共數據 | - | ||
IBM DB2 | 10及以上 | ||
InterSystems IRIS | 2023.1.1 | ||
KingbaseES | KingbaseES V8 | ||
SAP HANA | V2.0 | ||
達夢 | 8.1 | ||
神通數據庫 | 7.0 | ||
Gbase 8s | 8.7 | ||
進階數據源 | 大數據 | Greenplum | 5.X 和 6.X |
配置YMatrix數據源 | 5.X | ||
Doris | 0.14及以上版本 | ||
TiDB | 5.2.0、5.2.1 | ||
Impala | impala 2.2 、2.3、2.8、2.9、2.10、2.10 kudu1.5、3.4、4.1、Impala 2.10 kudu1.5 | ||
TRANSWARP INCEPTOR | V4.6、V4.9.2、V5.2.1、V6.0.2 | ||
StarRocks | 1.19 及以上 | ||
星環ArgoDB | V5.2 及以上版本 | ||
SelectDB | SelectDB Enterprise 2.1.6 | ||
Impala | Impala 2.2 Impala 2.3 Impala 2.8 Impala 2.9 Impala 2.10 Impala 3.4 Impala 4.1 Impala 2.10 kudu1.5 | ||
GaussDB 200 | 雲上最新版本 | ||
阿裏雲MaxCompute | MaxCompute JDBC 驅動版本爲 3.2.7 以上 | ||
ClickHouse | 20.1、22.6 | ||
PolarDB PostgreSQL | polarDB Oracle2.0 polarDB pg14 | ||
HP Vertica | V9.3.1 |
5. 庫表管理支持的數據源
一級分類 | 二級分類 | 數據源 | 支持的數據庫版本 |
---|---|---|---|
基礎數據源 | 基礎數據源 | MySQL | MySQL_5.1 MySQL_5.5 MySQL_5.5.46 MySQL_5.5.5 MySQL_5.6.22 MySQL_5.6.28 MySQL_5.6.29 MySQL_5.6.31 MySQL_5.6.34 MySQL_5.6.35MySQL_5.6.37 MySQL_5.7 MySQL_5.7.16 MySQL_6.5 MySQL_8.0 |
Oracle | oracle 9i oracle_9.2 oracle10.2.0 oracle 11g oracle_11g2 oracle_11.2.0.3 oracle_11.2.0.4 oracle_11.2.3 oracle 12c oracle 10g AIX版本 oracle19c | ||
SQL Server | SQL server 2000(4.2.1.1及之後的版本支持) SQL server 2005 SQL server 2008 SQL server 2012 SQL server 2014 SQL server 2016 SQL server 2019注:SQL server 2019 支持在4.0.17.1以及之後的FDL版本中使用 | ||
PostgreSQL | postgresql_9.4.7 9.5.0; | ||
配置OceanBase(Oracle模式)數據源 | 4.3.3 | ||
OceanBase(MySQL模式) | oceanbase4.3.3.1 企業版-MySQL實例 | ||
openGauss | 3.0.0及以上版本 | ||
SAP HANA | V2.0 | ||
IBM DB2 | DB2_7.2 DB2_8.1 DB2_8.2 DB2_9.7 DB2_10.5 | ||
InterSystems IRIS | 2023.1.1 | ||
SQLite | - | ||
HSQL | - | ||
INFORMIX | V11.7、V11.5、V12.x | ||
KINGBASE | KingbaseES V8 | ||
達夢資 | 8.1 | ||
進階數據源 | 大數據 | Doris | 0.14及以上版本 |
StarRocks | 1.19 及以上版本 | ||
Greenplum | 5.X 和 6.X | ||
YMatrix | 5.X | ||
Hadoop Hive | hive_1.1 Hadoop_Hive_1.2 hive2.3 hive2.1.2 hive2.1.1 hive3.3.1 | ||
TRANSWARP INCEPTOR | V4.6、V4.9.2、V5.2.1、V6.0.2 | ||
SelectDB | SelectDB Enterprise 2.1.6 | ||
Apache Impala | impala 2.2 impala 2.3 impala 2.8 impala 2.9 impala 2.10 impala 2.10 kudu1.5 Impala 3.4 Impala 4.1 | ||
ClickHouse | 20.1、22.6 | ||
星環ArgoDB | V5.2 及以上版本 | ||
PolarDB PostgreSQL | polarDB Oracle2.0 polarDB pg14 | ||
Presto | Presto_0.152 Presto_0.169 | ||
HP Vertica | V7.2.1-V10.0、 V12.0.3 | ||
MaxCompute | MaxCompute JDBC 驅動版本爲 3.2.7 以上 | ||
Gbase 8A | - | ||
GaussDB 200 | - | ||
Tidb | V5.2.0 V5.2.1 | ||
Amazon Redshift | 預置集群版本和Serverless版本 | ||
SeaboxMPP | 21.0.3.398 |
6. 實時任務支持的數據源
FineDataLink-實時任務支持的數據源類型如下表所示:
一級分類 | 二級分類 | 數據源 | 支持的數據庫版本 | 數據讀取 | 數據寫入 |
---|---|---|---|---|---|
基礎數據源 | 基礎數據源 | MySQL | MySQL_5.1 MySQL_5.5 MySQL_5.5.46 MySQL_5.5.5 MySQL_5.6.22 MySQL_5.6.28 MySQL_5.6.29 MySQL_5.6.31 MySQL_5.6.34 MySQL_5.6.35MySQL_5.6.37 MySQL_5.7 MySQL_5.7.16 MySQL_6.5 MySQL_8.0 | √ | √ |
Oracle | oracle 9i oracle_9.2 oracle10.2.0 oracle 11g oracle_11g2 oracle_11.2.0.3 oracle_11.2.0.4 oracle_11.2.3 oracle 12c oracle 10g AIX版本 oracle19c | √ | √ | ||
Microsoft SQL Server | SQL server 2000 SQL server 2005 SQL server 2008 SQL server 2012 SQL server 2014 SQL server 2016 SQL server 2019注:SQL server 2019 支持在4.0.17.1以及之後的FDL版本中使用。 | √ | √ | ||
PostgreSQL | postgresql_9.4.7 9.5.0 | √ | √ | ||
IBM DB2 | 10及以上 | √ | |||
SAP HANA | V2.0 | 開發中 | √ | ||
達夢 | 8.1 | 開發中 | √ | ||
進階數據源 | 大數據 | Greenplum | 5.X 和 6.X | 開發中 | √ |
Doris | 0.14及以上版本 | 開發中 | √ | ||
Tidb | 5.2.0、5.2.1 | 開發中 | √ | ||
StarRocks | 1.19 及以上 | 開發中 | √ | ||
GaussDB 200 | 雲上最新版本 | 開發中 | √ | ||
ClickHouse | 20.1.8.41 | 開發中 | √ | ||
Amazon Redshift | 支持雲上普通版本同時也支持預置集群版本和Serverless版本 | 開發中 | √ | ||
高階數據源 | 消息隊列 | Kafka | √ | √ | |
IBM MQ | IBM MQ V9.4.0.5 (p940-005-240823) | √ | 暫不支持 | ||
Pulsar | Pulsar | √ | √ | ||
接口協議(實時) | MQTT | 2.0.18 | √ | 暫不支持 |