1. 概述编辑
1.1 版本
| FineDataLink 版本 | 功能变动 |
|---|---|
| 4.1.5.2 | 字段映射处可在目标表字段中筛选出有异常的字段 |
| 4.1.5.4 | 1）数据来源 Tab 中，配置方式选择「选表」时，「数据去向与映射」Tab 下，来源表的字段映射中，能自动读取字段的注释；其他情况下，「注释」列的值为-- 2）若目标表支持写入注释，目标表为「自动建表」时，可自定义字段备注 3）目标表选择「已存在表」时，显示表备注；目标表选择「自动建表」时，可自定义表备注 4）数据同步支持DDL，详情参见本文第三章 |
1.2 功能简介
本文介绍「数据同步」设置数据去向或者使用「数据转换-DB表输出」时配置项说明。
「数据去向与映射」Tab 界面如下图所示：
注1：不同数据库支持的数据去向与映射有部分限制，具体请参见：定时任务数据源功能限制说明
2. 设置数据去向编辑
2.1 数据源/库
选择数据需要写入的数据库。支持的数据库请参见：FineDataLink支持的数据源 文档的第三章内容（支持数据写入的数据库）。
数据源处只展示已配置过数据连接且当前用户有数据连接使用权限的选项。
若数据库有模式，支持选择模式。如下图所示：
模式默认值说明如下：
| 模式 | 说明 |
|---|---|
| 数据库有模式 |
|
| 数据库没有模式 | 若数据连接中设置了数据库名称，「库」字段默认值为数据库名称，若数据连接中未设置数据库名称，「库」字段默认为空。 |
注1：模式配置项仅选择关系型数据库才出现。
注2：目标表如果是「已存在表」，获取的是此目标库/模式下的表；如果是「自动建表」建表建在此目标库/模式下。
2.2 目标表
注：若选择「自动建表」，未指定模式时，会使用数据库默认模式，而不是数据连接中的模式。
自动建表：是直接在目标数据库中新建一张表来存放。
注：若数据去向选择了「Doris」或者「StarRocks」数据源，则设置去向端表时，需要选择表类型，后续设置写入方式时有一定的限制，详情参见：Doris 数据源使用说明、StarRocks数据源使用说明
已存在表：是选择目标数据库中已有的表来存放数据。
注：若数据去向选择了「Doris」或者「StarRocks」数据源，则设置去向端表时，需要选择表类型，后续设置写入方式时有一定的限制，详情参见：Doris 数据源使用说明、StarRocks数据源使用说明
2.3 表备注
注：只在第一次建表时，同步表描述，后续定时任务再执行，表描述不会变化。
1）目标表选择「已存在」表时，显示已存在表的表描述。如下图所示：
2）目标表选择「自动建表」时，默认显示为空，可自定义表描述。如下图所示：
表描述要求：
默认为空，非必填。
输入可以为数字、字母、特殊字符、中文。
限制最大值为 500 字符。
3）不支持该功能的数据库：ClickHouse、Hive、Impala、TRANSWARP INCEPTOR、Informix、MaxCompute、SQLite、StarRocks。
3. 源表结构变化检测编辑
详情请参见：定时任务支持 DDL 同步
4. 设置字段映射编辑
建立「来源端-目标端」的字段对应关系。如下图所示：
注：4.1.3 及之后版本，目标表为 Hive、星环 TRANSWARP INCEPTOR 且选择自动建表时，可选取目标表里的某些字段作为分区键，详情请参见：支持分区建表、分区写入
4.1 映射方式
选择源表字段跟目标表字段的映射方式，有两种分别是「同名映射」和「同行映射」。
| 映射方式 | 匹配逻辑 |
|---|---|
| 同名映射 | 按照目标表字段与来源表字段字符重合的情况匹配，整体逻辑为： 1）根据来源字段，在目标表中寻找同名（字符完全相同）字段对其进行匹配 2）没有同名字段时：
3）如果在目标表中找不到同名或者包含目标表字段字符的字段，则右侧映射字段显示为空 |
| 同行映射 | 源头字段和目标表字段按顺序匹配：同行则建立映射关系 |
4.2 手动建表
目标表选择「自动建表」时，才显示「手动建表」功能。
点击「手动建表」按钮后，用户可修改字段名、字段类型，以及去定义各种表的特性。如下图所示：
1）支持查看和修改建表语句。
建表语句支持「重新获取」，重新获取=重置建表语句。
修改建表语句，不会与字段映射里的配置做联动。
2）修改建表语句后，点击「执行建表」按钮，在数据库中建表成功后，「本文2.2 节目标表」处将自动切换为已存在表。
3）「手动建表」中的配置内容，不会在任务运行时生效；用户可手动运行，建表成功后，按照已存在表的逻辑，核对配置是否合理。
4.3 编辑映射
1）可对目标表字段做以下设置：
取消某字段的映射
修改字段展示顺序
修改字段类型；修改字段名称
设置主键；设置字段非空
2）用户可自定义设置目标表字段与来源表字段之间的映射关系。如下图所示：
4.4 重新获取
源表的字段、字段类型发生改变时，点击该按钮可重新获取，并初始化字段映射界面。
4.5 主键
4.0.21 及之后版本，数据去向 Tab 中若选择「自动建表」，字段映射 Tab 中可设置物理主键。
注：若数据去向 Tab 中若选择「自动建表」，字段映射 Tab 中未设置主键，运行任务建表成功后，再次编辑任务，不支持修改主键
注：Hive、星环Inceptor 不支持物理主键和设置主键标识列。
4.6 筛选目标表字段
可筛选出目标表的已映射/未映射字段、有异常（例如字段名称为空、类型为空等）/无异常字段。如下图所示：
4.7 同步字段备注
不支持读取/写入字段备注的数据库：Hive、Impala、TRANSWARP INCEPTOR、Informix、MaxCompute、SQLite、StarRocks
只在第一次建表时，同步字段备注，后续定时任务再执行，字段备注不会变化。
支持将来源表的字段备注同步到目标表中；若目标表为自动建表，支持自定义目标表的字段备注。
1）来源表的「注释」列说明：
数据来源 Tab 中，配置方式选择「选表」时，「数据去向与映射」Tab 下，来源表的字段映射中，能自动读取字段的注释。如下图所示：
其他情况下，「注释」列的值为--。如下图所示：
2）目标表的「注释」列说明：
目标表为「已存在表」，显示已存在表的字段备注，不支持修改字段备注。
目标表为「自动建表」，可自定义字段备注。如下图所示：
字段备注格式要求：
默认为源表字段备注，若获取不到则为空，非必填。
输入可以为数字、字母、特殊字符、中文。
限制最大值为 30 字符。
5. 注意事项编辑
使用时一些需要注意的点：
1）映射时删除了一些来源表字段，那么切换映射方式后，还是会根据剩下来的这些字段进行调整。
2）手动将映射方式从默认项「同名映射」切换到「同行映射」，点击「重新获取」字段，获取的字段将按照「同行映射」的方式自动匹配。
3）以下两种场景会出现目标表无字段可匹配源头表的情况，在这两种情况下，右侧目标表字段可展示为空：
同名映射：目标表不存在包含源头表字段的字段。
同行映射：源头表字段数量大于目标表字段数量。
4）映射时，如果右侧目标表有空字段，会出现提示图标，悬浮在其上方提示：目标表字段存在空值
5）定时任务运行后，字段映射处不支持修改目标表字段类型。