1. 概述
1.1 版本
FineDataLink 版本 | 功能变动 |
---|---|
4.0.20 | 支持对表中不同字段给予加工处理后再流向不同表 |
1.2 应用场景
处理后的数据输出前,用户希望按照不同的过滤条件输出到多张表中,若做多个定时任务实现,比较麻烦,且多次读取源表,比较耗时,影响性能。
1.3 功能简介
「数据转换」节点数据支持同时输出至多张表,用户可根据业务需要,将同一数据表中的不同字段处理后分别输出至多张表。如下图所示:
demo 示例详情参见:https://demo.finedatalink.com/ 「数据转换-数据分发-副本」
2. 示例
2.1 场景模拟
示例表:客户购买信息.xls
用户希望将「客户购买信息」表中的数据拆分成客户主题和商品主题。
例如,将货主名称、货主地址、货主城市、货主地区、货主邮政编码、货主国家、货主省份、货主手机号入库到「客户」表,将商品ID、商品名称、商品单价入库到「商品」表。
2.2 新建定时任务
新建一个定时任务,并拖入「数据转换」节点。如下图所示:
2.3 设置数据输入
点击「数据转换」节点,拖入「DB表输入」算子,设置数据输入。如下图所示:
2.4 设置数据分流
2.4.1 新增两个DB表输出算子
1)拖入两个「DB表输出」算子,与「DB表输入」算子相连。如下图所示:
2)将两个「DB表输出」算子重命名为「商品表」、「客户表」。
2.4.2 数据分发
注:已连接输出算子的算子,可以再连接其他输出算子;不支持多个输出算子的上游为不同算子。输出算子指:DB表输出、参数输出、API输出、简道云输出
1)右键点击「DB表输入」算子,点击「数据分发」。如下图所示:
2)设置数据分发条件。将货主名称、货主地址、货主城市、货主地区、货主邮政编码、货主国家、货主省份、货主手机号入库到客户表,将商品ID、商品名称、商品单价入库到商品表。如下图所示:
注:若希望输出到多张表中的数据相同,不设置分发条件即可。
各设置项介绍如下表所示:
设置项 | 备注 |
---|---|
输出节点 | 获取该算子连接的下游节点名称,直接引用,不可编辑 |
分发内容 | 描述上游数据中的哪些列将被输出,点击可编辑: |
分发条件 | 可配置分流条件 注:4.1.1 及之后版本,产品内条件判断逻辑进行了统一,每个运算符的说明可参见:条件判断逻辑说明 |
备注 | 展示用户自定义描述,一般是针对复杂分流条件,点击可编辑,默认为空 |
点击「数据预览」,可预览不同分支对应的数据。如下图所示:
2.4.3 对分发数据表设置
「商品表」设置如下图所示:
「客户表」设置如下图所示:
2.5 运行任务
点击「运行」任务。任务执行成功如下图所示:
「商品」表信息如下图所示:
「客户」表信息如下图所示: