1. 概述
1.1 版本
FineDataLink 版本 | 功能变动 |
---|---|
4.2.6.1 | 针对 AnalyticDB MySQL 版数据源:
|
1.2 功能简介
FineDataLink 支持连接 AnalyticDB MySQL 数据源,适配功能:
定时任务的读取和写入。
管道任务写入。
库表管理功能。
数据服务功能。
2. 用户需知
数据开发-定时任务中:
AnalyticDB MySQL 数据源作为目标端时,装载方式可选择「普通装载」、「高速装载」。
装载方式 | 应用场景 | 前提条件 |
---|---|---|
普通装载 | 优势:支持 脏数据容忍 劣势:写入速度略慢 | - |
高速装载 | 优势:写入速度较快 劣势:不支持 脏数据容忍,若遇到脏数据,节点/算子会直接报错,并且不能查看到报错的具体脏数据信息 | 1)需要联系技术支持,新增/修改 FineDB 数据库中的 fine_conf_entity 表字段。 2)配置数据连接时,数据连接 URL 需要加参数。详情请参见本文第三章内容说明。 |
3. 配置数据连接
3.1 前提条件
详情请参见:前提条件
3.2 版本和驱动
下载驱动,并将其上传至 FineDataLink,如何上传可参见:驱动管理
支持的数据库版本 | 驱动 |
---|---|
AnalyticDB MySQL 版 3.2.3.4 |
3.3 收集连接信息
在连接数据库之前,请收集以下信息:
数据库所在服务器的 IP 和端口号。
数据库的用户名和密码。
数据库名称。
3.4 具体连接步骤
创建数据连接步骤请参见:创建并管理数据源
需注意:
1)配置数据连接时,驱动需要切换为「自定义」,换为本文 3.2 节的驱动。
2)数据开发-定时任务中,AnalyticDB MySQL 数据源作为目标端&装载方式选择「高速装载」,数据连接 URL 中需要添加参数,URL 格式示例:jdbc:mysql://amv-bp1bxemrli607hj3100005137o.ads.aliyuncs.com:3306/?allowLoadLocalInfile=true
4. 数据源特性说明
4.1 数据开发-定时任务
4.1.1 数据来源
不支持调用存储过程。
支持表描述与字段注释;支持并行取数。详情请参见:数据同步-数据来源
4.1.2 数据去向
不支持定时任务 DDL 同步
不支持分区键。
4.1.3 写入方式
定时任务中设置数据输出到 AnalyticDB MySQL 数据库时。「写入方式」界面如下图所示:
设置项 | 说明 |
---|---|
主键冲突策略 | 仅支持:「主键相同,覆盖目标表的数据」 |
装载方式 | 默认为普通装载 应用场景:参考本文第二章说明 |
应用场景:参考本文第二章说明 前提条件: 需联系技术支持,在 FineDB 数据库的 fine_conf_entity 表中修改/新增参数后,才能使用该装载方式 说明: 若「高速装载」不可用,会置灰;逻辑删除不支持「高速装载」 |
4.2 管道任务
作为管道任务目标端时,写入方式只能选择普通装载。
不支持无主键同步功能 ;如果用户未定义主键,但定义了分布键,AnalyticDB for MySQL不会自动添加主键,此时做数据删改会报错。
作为管道任务目标端时,支持 DDL(实际是否支持需要看源端是否同时支持)。