历史版本2 :2023-08产品月报 返回文档
编辑时间: 内容长度:图片数:目录数: 修改原因:

2023年 8 月 FineDataLink 继续为您带来新物料。

  • 产品新功能

  • 文档上新

  • 文档共创活动

目录:

产品新功能编辑

FineBI「公共数据」支持作为数据库来源端和发布为API

用户想要将 FineBI 中处理好并发布到公共数据的数据集在其他系统中使用。

1)独立部署和集成部署的定时任务支持读取「公共数据」,输出到其他目标端。

详情请参见:集成部署下读取FineBI公共数据 独立部署下读取FineBI公共数据

集成部署下效果如下图所示:

16.png

2)数据服务支持读取「公共数据」,发布为API。

详情请参见:使用FineBI公共数据发布API

17.png

3)独立部署工程支持将定时任务中输出的数据表输出至 FineBI 公共数据中,如下图所示:

详情请参见:集成部署下定时任务结果输出至FineBI独立部署下定时任务结果输出至FineBI

18.png

定时任务支持批量配置和管理调度

详情参见:定时任务运维

开发人员在开发完任务后,由运维人员在运维界面处负责统一批量设置任务的调度,FineDataLink 支持批量设置定时任务的调度配置,如下图所示:

19.png

当任务的通知对象发生变更时,需要批量修改涉及到的任务,FineDataLink 支持批量设置定时任务的结果通知,如下图所示:

20.png

独立部署工程支持集群

注:仅数据开发功能支持集群,若配置了集群,则独立部署工程中数据管道、数据服务功能无法继续使用,后续迭代中将支持,敬请期待。

用户在使用 FineDataLink 时,希望能实现高可用和高并发,提升产品使用稳定性。

FineDataLink 独立部署工程支持集群

  • 高并发:定时任务的最小运行单元是步骤流内的节点,任务执行时会生成一个任务实例,任务实例内包含多个待运行节点。任务实例内的待运行节点均衡地分发到各集群节点执行。

  • 高可用:集群节点被置为不可用时,原本运行在该集群节点上的节点转移至其他正常集群节点。

详情参见:集群部署概述

管道任务支持快速选表

当管道任务源库表量较大,需要从大量表中选取部分已知表名的表作为同步表,FineDataLink 支持通过粘贴表名的方式,快速选表,如下图所示:

详情参见:配置数据管道任务

21.png

管道脏数据查看和处理&日志整体优化

详情参见:单个管道任务管理

优化前:管道任务脏数据仅支持重跑,不支持忽略、重试,且不能查看任务中单个数据表的脏数据情况,也不能导出脏数据。

优化后:管道任务支持用户快速查看脏数据、快速定位单条脏数据产生的原因,如下图所示:

22.png

管道任务支持用户对脏数据进行灵活处理,除了对脏数据进行重新同步,还可以进行忽略和重试(在任务运行、暂停、中止时均可进行),如下图所示:

23.png

支持查看实时数据与近期统计数据,提供了简易图表来提升数据趋势的可读性,如下图所示:

24.png