产品新功能
数据开发
可为定时任务添加描述
新建定时任务时,可为定时任务添加任务描述;定时任务保存后,可修改描述。如下图所示:
Ø详情请参见:数据开发界面介绍
定时任务区分开发/生产环境
用户需要将定时任务的开发编辑区和运行区隔离,所有定时任务的修订和更改通过在开发编辑区完成调试和试运行后,通过发布机制,发布到稳定的运行环境,保证开发和运行互不影响。
对于定时任务,支持开发模式和生产模式,实现代码的隔离;开发模式的任务可一键发布上线,将任务发布为生产模式。
Ø详情请参见:开发模式与生产模式
定时任务运行记录存储位置变更&支持清理
1)FineDB 数据库中的 fine_dp_work_exec_record 表迁移到 LogDB 中,表名不变,后续数据均写入迁移后数据表。升级后会将历史运行记录迁移到 LogDB 中。
2)定时任务运行记录可直接使用日志清理功能进行手动/自动清理,如下图所示:
详情参见:日志简介
3)记录读写过程日志/异常和错误日志使用过程中产生的过程日志,支持将运行记录导出为文件,以供查看和使用。如下图所示:
数据源为API时,支持指定响应数据字符编码方式
数据同步-API、API输入算子、参数赋值-API中,支持指定响应数据字符编码方式,支持 UTF-8、UTF-16、GBK 三种方式,将按照字符编码方式解析 API 响应数据。
Ø详情请参见:数据同步-API
管理系统
升级版本支持上传更新
前端支持手动上传 JAR 包进行更新升级,解决每个月发布的中间版本不能提供一键升级的问题,如下图所示:
Ø详情参见:FineDataLink一键升级
数据管道
同步标记时间戳优化
2.1 之后版本的 StarRocks,在管道任务中,支持「同步时标记时间戳」功能。
2.0 版本之后的 Doris,在管道任务中,支持「同步时标记时间戳」功能。
来源表若包含 _fdl_update_timestamp、_fdl_marked_deleted、_fdl_update_timestamp 字段,实时同步时会屏蔽这些字段
目标表选择已存在表且已存在表包含「_fdl_marked_deleted」字段时,支持使用源端逻辑删除功能,支持「同步时标记时间戳」功能
管道任务支持写入SAP HANA
管道任务,支持 SAP HANA 作为写入数据源。
文档上新
一条消息提醒一个人,可发送多条消息
应用场景:
群通知中,用户希望:
每条消息对应一个通知人。
某个人对应的通知内容中,文字使用颜色代表事务的紧急程度。
通知内容中包含链接,用户点击即可跳转到详情页面。
如下图所示:
参考文档:
Ø 详情请参见:一条消息提醒一个人,可发送多条消息
循环往复执行定时任务
应用场景:
用户创建两个定时任务(调用关系)处理数据,处理后的数据被用于大屏展示。
由于对数据的实时性要求较高,希望任务执行后立刻被拉起,且任务运维界面不希望看到任务出现排队的情况。
参考文档:
Ø 详情请参见:循环往复执行定时任务
文档共创活动
参与活动,可赢得 F 币!!
文档问题反馈
无门槛,奖励F币:2-150F币
鼓励大家直接编辑文档,只反馈问题,奖励较少,发现问题编辑后,奖励较多
只要您觉得某篇文档有问题(BUG、描述不清晰、图片老旧、写的不够好应该XXXX等),都可反馈给我们(不限制问题类型),审核通过后发放F币
查看详情:FineDataLink文档问题反馈-最高150F币
文档搜索反馈
无门槛,奖励F币:2-10F币
搜不到?有想要的内容不知道搜什么?感觉文档搜索太垃圾,有建议等,反馈给我们
查看详情:FineDataLink文档搜索反馈-最高10F币
文档内容调研
有门槛:近一年内阅读FDL文档篇数超过 40 篇,奖励F币:4F币