1. 版本
FineDataLink 版本 | 功能变动 |
---|---|
1.5 | 数据输入适配 API |
4.1.8.2 | 定时任务支持读取和写入神通数据库 管道任务支持写入神通数据库 数据服务支持读取神通数据库 |
4.1.8.3 | 适配Impala 3.4、Impala 4.1 |
4.1.10.4 | 数据管道来源端支持 MySQL5.5 |
4.1.11.2 | 定时任务支持读取和写入 YMatrix 数据库 管道任务支持写入 YMatrix 数据库 数据服务支持读取 YMatrix 数据库 库表管理模块支持 YMatrix 数据库 |
4.1.11.3 | 定时任务支持读取和写入 PolarDB PostgreSQL 数据库 管道任务支持写入 PolarDB PostgreSQL 数据库 数据服务支持读取 PolarDB PostgreSQL 数据库 数据中心模块支持 PolarDB PostgreSQL 数据库 定时任务支持写入 Elasticsearch 数据源 |
4.1.11.4 | 定时任务支持写入 MaxCompute 数据源 定时任务支持读取 FineLogDB(FDL) 数据源 新增实时任务支持的数据源 |
查看历史版本更新 | ||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
|
2. 数据管道支持的数据源类型
FineDataLink-数据管道,实时数据同步支持的数据源类型如下表所示:
一级分类 | 二级分类 | 数据源 | 读取 | 写入 | 环境准备 | 日志解析方式 | DDL支持情况 |
---|---|---|---|---|---|---|---|
高阶数据源 | Mysql(Binlog) | MySQL | MySQL 5.5及以上的非只读数据库 | MySQL 5.6及以上的非只读数据库 | MySQL环境准备 | Binlog | 数据管道DDL支持数据源范围 |
SQL Server(CDC) | SQL Server | 企业版(Enterprise Edition) 2008 2012 2014 2016 2017 2019 标准版(Standard) 2016 SP1 2017 2019 | 2000 2005 2008 2012 2014 2016 2017 2019 | SQL Server 环境准备 | CDC | ||
Oracle(Logminer) | Oracle | Oracle 10g 11g 12c 18c 19c Oracle RAC集群 | Oracle 10g 11g 12c 18c 19c Oracle RAC集群 | Oracle 环境准备 | LogMiner | ||
PostgreSQL(wal2json) | PostgreSQL | PostgreSQL 9.4以及以上版本 | postgresql_9.4.7 9.5.0 | PostgreSQL环境准备 | wal2json | ||
消息队列 | Kafka | 0.10.2到3.4 | 暂不支持 | ||||
Db2(CDC) | Db2 | 9.x、10.x、11.x | 暂不支持 | DB2 环境准备 | CDC | ||
SAP HANA | SAP HANA | 2.0 SPS00~SPS07 | 2.0 SPS00~SPS07 | SAP HANA 环境准备 | 触发器 | ||
进阶数据源 | 进阶-大数据 | GaussDB 200 | 暂不支持 | GaussDB 200 | |||
Greenplum | 暂不支持 | 5.X 和 6.X | Greenplum作为目标端时,需要数据库用户具有CREATE SCHEMA和CREATE TABLE权限。数据装载时,将新建名为fdl_temp的模式用于存放临时表。 | ||||
Doris | 暂不支持 | 0.14及以上版本 | |||||
StarRocks | 暂不支持 | 2.3 以上版本 | |||||
TiDB | 暂不支持 | V5.2.0 V5.2.1 | |||||
ClickHouse | 暂不支持 | 20.1.8.41 | |||||
Amazon Redshift | 暂不支持 | 支持云上普通版本同时也支持预置集群版本和Serverless版本 | |||||
SeaboxMPP | 暂不支持 | 21.0.3.398 | |||||
PolarDB PostgreSQL | 暂不支持 | polarDB Oracle2.0 polarDB pg14 | |||||
YMatrix | 暂不支持 | 5.X | |||||
基础数据源 | 基础数据源 | 达梦 | 暂不支持 | 8.1 | |||
神通数据库 | 暂不支持 | 7.0 |
3. 定时任务支持的数据源类型
FineDataLink-数据开发,定时数据同步支持的数据源类型如下表所示:
一级分类 | 二级分类 | 数据源 | 支持的数据库版本 | 数据读取 | 数据写入 |
---|---|---|---|---|---|
基础数据源 | 基础数据源 | MySQL | MySQL_5.1 MySQL_5.5 MySQL_5.5.46 MySQL_5.5.5 MySQL_5.6.22 MySQL_5.6.28 MySQL_5.6.29 MySQL_5.6.31 MySQL_5.6.34 MySQL_5.6.35MySQL_5.6.37 MySQL_5.7 MySQL_5.7.16 MySQL_6.5 MySQL_8.0 | √ | √ |
Oracle | oracle 9i oracle_9.2 oracle10.2.0 oracle 11g oracle_11g2 oracle_11.2.0.3 oracle_11.2.0.4 oracle_11.2.3 oracle 12c oracle 10g AIX版本 oracle19c | √ | √ | ||
SQL Server | SQL server 2000 SQL server 2005 SQL server 2008 SQL server 2012 SQL server 2014 SQL server 2016 SQL server 2019注:SQL server 2019 支持在4.0.17.1以及之后的FDL版本中使用。 | √ | √ | ||
PostgreSQL | postgresql_9.4.7 9.5.0; | √ | √ | ||
SQLite | - | √ | √ | ||
HSQL | - | √ | 开发中 | ||
IBM DB2 | DB2_7.2 DB2_8.1 DB2_8.2 DB2_9.7 DB2_10.5 | √ | √ | ||
Informix | V11.7、V11.5、V12.x | √ | √ | ||
达梦 | 8.1 | √ | √ | ||
SAP HANA | V2.0 | √ | √ | ||
KingbaseES | KingbaseES V8 | √ | √ | ||
神通数据库 | 7.0 | √ | √ | ||
服务器数据集 | - | √ | 不支持 | ||
公共数据 | - | √ | √ | ||
SAP Sybase ASE | ASE15.7(集群)、16.0(集群)以及12.5(单机)和15.5(单机) | √ | 不支持 | ||
Gbase 8s | 8.7 | √ | 不支持 | ||
FineLogDB(FDL) | - | √ | 不支持 | ||
进阶数据源 | 大数据 | Impala | impala 2.2 impala 2.3 impala 2.8 impala 2.9 impala 2.10 impala 2.10 kudu1.5 Impala 3.4 Impala 4.1 | √ | 不支持 |
ClickHouse | 20.1、22.6 | √ | √ | ||
Presto | Presto_0.152 Presto_0.169 | √ | 开发中 | ||
5.X 和 6.X | √ | √ | |||
PolarDB PostgreSQL | polarDB Oracle2.0 polarDB pg14 | √ | √ | ||
YMatrix | 5.X | √ | √ | ||
Hive | hive_1.1 Hadoop_Hive_1.2 hive2.3 hive2.1.2 hive2.1.1 hive3.3.1 | √ | √ | ||
GaussDB 200 | - | √ | √ | ||
Gbase 8A | - | √ | √ | ||
HP Vertica | V7.2.1-V10.0、 V12.0.3 | √ | √ | ||
Doris | 0.14及以上版本 | √ | √ | ||
TRANSWARP INCEPTOR | V4.6、V4.9.2、V5.2.1、V6.0.2 | √ | √ | ||
StarRocks | 1.19及以上版本 | √ | √ | ||
阿里云MaxCompute | MaxCompute JDBC 驱动版本为 3.2.7 以上 | √ | √ | ||
TiDB | V5.2.0 V5.2.1 | √ | √ | ||
Amazon Redshift | 预置集群版本和Serverless版本 | √ | √ | ||
SeaboxMPP | 21.0.3.398 | √ | √ | ||
NoSQL | MongoDB | 7及以下版本都支持 | √ | √ | |
Elasticsearch | 只支持 7.0 及以上集群和非集群版本 | 可使用 API 输入 | √ | ||
应用连接器(定时) | 简道云 | - | √ | √ | |
SAP ERP | - | √ | 开发中 | ||
接口协议(定时) | API | - | √ | √ | |
WebService | - | √ | 开发中 | ||
文件系统 | FTP/SFTP | - | √ | √ | |
本地文件 | - | √ | √ |
4. 数据服务支持的数据源
FineDataLink-数据服务支持的数据源类型如下表所示:
一级分类 | 二级分类 | 数据源 | 支持的数据库版本 |
---|---|---|---|
基础数据源 | 基础数据源 | MySQL | MySQL_5.1 MySQL_5.5 MySQL_5.5.46 MySQL_5.5.5 MySQL_5.6.22 MySQL_5.6.28 MySQL_5.6.29 MySQL_5.6.31 MySQL_5.6.34 MySQL_5.6.35MySQL_5.6.37 MySQL_5.7 MySQL_5.7.16 MySQL_6.5 MySQL_8.0 |
Oracle | oracle 9i oracle_9.2 oracle10.2.0 oracle 11g oracle_11g2 oracle_11.2.0.3 oracle_11.2.0.4 oracle_11.2.3 oracle 12c oracle 10g AIX版本 oracle19c | ||
SQL Server | SQL server 2000 SQL server 2005 SQL server 2008 SQL server 2012 SQL server 2014 SQL server 2016 SQL server 2019注:SQL server 2019 支持在4.0.17.1以及之后的FDL版本中使用。 | ||
PostgreSQL | postgresql_9.4.7 9.5.0 | ||
FineBI 公共数据 | - | ||
IBM DB2 | 10及以上 | ||
KingbaseES | KingbaseES V8 | ||
SAP HANA | V2.0 | ||
达梦 | 8.1 | ||
神通数据库 | 7.0 | ||
Gbase 8s | 8.7 | ||
进阶数据源 | 大数据 | Greenplum | 5.X 和 6.X |
配置YMatrix数据源 | 5.X | ||
Doris | 0.14及以上版本 | ||
TiDB | 5.2.0、5.2.1 | ||
Impala | impala 2.2 、2.3、2.8、2.9、2.10、2.10 kudu1.5、3.4、4.1 | ||
TRANSWARP INCEPTOR | V4.6、V4.9.2、V5.2.1、V6.0.2 | ||
StarRocks | 1.19 及以上 | ||
GaussDB 200 | 云上最新版本 | ||
阿里云MaxCompute | MaxCompute JDBC 驱动版本为 3.2.7 以上 | ||
ClickHouse | 20.1、22.6 | ||
PolarDB PostgreSQL | polarDB Oracle2.0 polarDB pg14 | ||
HP Vertica | V9.3.1 |
5. 库表管理支持的数据源
一级分类 | 二级分类 | 数据源 | 支持的数据库版本 |
---|---|---|---|
基础数据源 | 基础数据源 | MySQL | MySQL_5.1 MySQL_5.5 MySQL_5.5.46 MySQL_5.5.5 MySQL_5.6.22 MySQL_5.6.28 MySQL_5.6.29 MySQL_5.6.31 MySQL_5.6.34 MySQL_5.6.35MySQL_5.6.37 MySQL_5.7 MySQL_5.7.16 MySQL_6.5 MySQL_8.0 |
Oracle | oracle 9i oracle_9.2 oracle10.2.0 oracle 11g oracle_11g2 oracle_11.2.0.3 oracle_11.2.0.4 oracle_11.2.3 oracle 12c oracle 10g AIX版本 oracle19c | ||
SQL Server | SQL server 2000 SQL server 2005 SQL server 2008 SQL server 2012 SQL server 2014 SQL server 2016 SQL server 2019注:SQL server 2019 支持在4.0.17.1以及之后的FDL版本中使用 | ||
PostgreSQL | postgresql_9.4.7 9.5.0; | ||
SAP HANA | V2.0 | ||
IBM DB2 | DB2_7.2 DB2_8.1 DB2_8.2 DB2_9.7 DB2_10.5 | ||
SQLite | - | ||
HSQL | - | ||
Informix | V11.7、V11.5、V12.x | ||
KingbaseES | KingbaseES V8 | ||
达梦 | 8.1 | ||
进阶数据源 | 大数据 | Doris | 0.14及以上版本 |
StarRocks | 1.19 及以上版本 | ||
Greenplum | 5.X 和 6.X | ||
配置YMatrix数据源 | 5.X | ||
Hive | hive_1.1 Hadoop_Hive_1.2 hive2.3 hive2.1.2 hive2.1.1 hive3.3.1 | ||
TRANSWARP INCEPTOR | V4.6、V4.9.2、V5.2.1、V6.0.2 | ||
Impala | impala 2.2 impala 2.3 impala 2.8 impala 2.9 impala 2.10 impala 2.10 kudu1.5 Impala 3.4 Impala 4.1 | ||
ClickHouse | 20.1、22.6 | ||
PolarDB PostgreSQL | polarDB Oracle2.0 polarDB pg14 | ||
Presto | Presto_0.152 Presto_0.169 | ||
HP Vertica | V7.2.1-V10.0、 V12.0.3 | ||
阿里云MaxCompute | MaxCompute JDBC 驱动版本为 3.2.7 以上 | ||
Gbase 8A | - | ||
GaussDB 200 | - | ||
TiDB | V5.2.0 V5.2.1 | ||
Amazon Redshift | 预置集群版本和Serverless版本 | ||
SeaboxMPP | 21.0.3.398 |
6. 实时任务支持的数据源
FineDataLink-实时任务支持的数据源类型如下表所示:
一级分类 | 二级分类 | 数据源 | 支持的数据库版本 | 数据读取 | 数据写入 |
---|---|---|---|---|---|
基础数据源 | 基础数据源 | MySQL | MySQL_5.1 MySQL_5.5 MySQL_5.5.46 MySQL_5.5.5 MySQL_5.6.22 MySQL_5.6.28 MySQL_5.6.29 MySQL_5.6.31 MySQL_5.6.34 MySQL_5.6.35MySQL_5.6.37 MySQL_5.7 MySQL_5.7.16 MySQL_6.5 MySQL_8.0 | √ | √ |
Oracle | oracle 9i oracle_9.2 oracle10.2.0 oracle 11g oracle_11g2 oracle_11.2.0.3 oracle_11.2.0.4 oracle_11.2.3 oracle 12c oracle 10g AIX版本 oracle19c | √ | √ | ||
SQL Server | SQL server 2000 SQL server 2005 SQL server 2008 SQL server 2012 SQL server 2014 SQL server 2016 SQL server 2019注:SQL server 2019 支持在4.0.17.1以及之后的FDL版本中使用。 | √ | √ | ||
PostgreSQL | postgresql_9.4.7 9.5.0 | √ | √ | ||
IBM DB2 | 10及以上 | √ | |||
SAP HANA | V2.0 | √ | √ | ||
达梦 | 8.1 | 开发中 | √ | ||
进阶数据源 | 大数据 | Greenplum | 5.X 和 6.X | 开发中 | √ |
Doris | 0.14及以上版本 | 开发中 | √ | ||
TiDB | 5.2.0、5.2.1 | 开发中 | √ | ||
Impala | impala 2.2 、2.3、2.8、2.9、2.10、2.10 kudu1.5、3.4、4.1 | 开发中 | √ | ||
StarRocks | 1.19 及以上 | 开发中 | √ | ||
GaussDB 200 | 云上最新版本 | 开发中 | √ | ||
ClickHouse | 20.1、22.6 | 开发中 | √ | ||
Amazon Redshift | 支持云上普通版本同时也支持预置集群版本和Serverless版本 | 开发中 | √ | ||
高阶数据源 | 消息队列 | Kafka | √ | √ | |
Pulsar | Pulsar | √ | √ |