产品新功能
实时任务
新增实时采集任务
为了避免重复解析数据库日志导致数据库压力过大,新增实时采集任务,可以对数据库日志解析进行管理,存储日志解析产生的变更数据,实时任务、管道任务能够消费实时数据共享中心的数据。
详情参见:实时采集任务
实时任务运维优化
功能使用操作示例详情参见:实时任务运维示例
可观测性优化:
日志优化:心跳日志优化、补充断点启动日志等
详情参见:实时任务运行日志介绍
补充任务执行单元输入输出数据量、输入输出读取写入速率、背压率等,便于用户观测任务运行情况
详情参见:单个实时任务管理
可控制性优化:
在「任务控制>任务属性」的高级属性中,支持控制单个内存。
详情参见:单个实时任务管理
数据管理
新增全局清洗规则
数据表有大量的表和字段需要设置统一的清洗规则或者需要批量进行字段脱敏加密等。
可以在「数据管理>清洗规则」下创建、管理全局清洗规则,包含替换、加解密、公式规则;设置的清洗规则可以在「数据开发」的「值替换」算子中引用。
详情参见:全局清洗规则
定时任务
参数赋值下游节点支持获取参数实际值调试
优化前:
调试值需要经常刷新重新获取,尤其是 API 获取的参数,token有时效性,容易失效;
循环容器内,多个参数值会被识别成一个值,无法正常预览数据,需要去前面节点修改默认值。
优化后:
「参数赋值」支持一键刷新调试值,解决调试值需要经常刷新重新获取的问题,如下图所示:
对于赋值参数,用户可以进行批量的刷新,以便在调试的时候进行查看,如下图所示:
当循环容器勾选了遍历对象后,使用该参数在数据预览时可以模拟循环执行情况,如下图所示:
文档上新
功能使用指导

调度配置方案
用户在开发完多个定时任务后,希望对存在业务上下游关联的定时任务设置调度策略。
文章将详细介绍根据不同的任务运行要求,如何通过「定时调度」和「事件调度」保证多个定时任务的协调运行。
参考文档:
Ø 详情请参见:调度配置方案
定时任务排队问题排查方案
用户在手动触发任务或者调度触发任务过程中,FineDataLink 工程中可能会出现由于内存不足、并发不足等问题导致的任务卡住、任务排队的问题,问题原因各不相同。
想知道如何对部分定时任务运行排队问题进行排查。
参考文档:
Ø 详情请参见:定时任务排队问题排查方案
客户案例
单个简道云子表单输出
应用场景:
用户想要将数据库系统数据输出到简道云子表单中,实现子表单数据的新增、更新和删除。
参考文档:
Ø 详情请参见:单个简道云子表单输出
dbf文件批量自动同步
应用场景:
希望将二进制的 dbf 文件处理成二维表并定时自动同步,可使用本文方案,为企业降本增效。
参考文档:
Ø 详情请参见:dbf 文件批量自动同步
数据处理-按编号和日期汇总顺序拼接数据
应用场景:
某公司的闸机系统会按照人员编号、通行门禁除、通信时间3个字段,记录每一个人员,经过每一处门禁,具体经过的时间。
希望可以将原始通行明细数据,汇总成按:每人每天一条汇总通行详情,且通行详情需要按照时间先后排序。
例如原始数据如下图所示:
期望数据处理后的结果:
参考文档:
Ø 详情请参见:数据处理-按编号和日期汇总顺序拼接数据
API取数-获取美团企业版数据
应用场景:
用户需要将美团企业版的接口数据取出,例如希望将 订单列表查询 中的数据取出,如下图所示:
而「美团企业版」的所有接口调用需要对请求参数进行加密,响应参数进行解密,详情参见:签名实例
参考文档:
Ø 详情请参见:API取数-获取美团企业版数据
简道云表单输出(包含部门成员)
应用场景:
公司之前手动在 Excel 表中录入公司电脑借用信息,现在使用简道云表单进行录入。为了实现信息的同步,需要将之前在 Excel 表中录入的信息导入到简道云表单中。
Excel 表信息如下图所示:
简道云表单样式如下图所示:
简道云表单中包含「部门」和「成员」两个控件。
参考文档:
Ø 详情请参见:简道云表单输出(包含部门成员)