概述
本文对帮助文档中 FineDataLink 的实际应用文档进行筛选、整理、归类、排版,形成了内容合辑,文章按难易程度、内容模块整理分类为不同的篇章,点击标题即可进入相应文章。
持续更新中……
业务场景案例
数仓搭建
业务系统读写分离
帆软产品组合应用
数据实时传输
说明
| 文档 |
---|
高时效数据实时同步,实现实时监控大屏、实时监控车间看板等场景,支撑快速决策分析 | 数据管道概述
|
数据告警
API专题
FineBI 数据落库
说明
| 文档 |
---|
FineBI 的公共数据,通过FDL完成数据落库,FR 等数据分析工具可应用以上数据进行展示分析 | 数据集输入-公共数据
|
数据服务
说明
| 文档 |
---|
某公司旗下各个地区有多个分公司和分店,且使用的同一套业务系统。 业务数据会全部汇总到总部的数据库内,分店只能在业务系统上看到特定的分析和数据,无法实现自定义分析。 总部希望对数据进行分权限管控:总部按照地区提供数据,一个地区分店和分公司只能看到自己地区的数据,不允许看到其他地区的数据,各地区自行获取数据后在不同工具中进行数据分析和使用。 | 使用数据服务对数据分权限管控 |
读取简道云数据/数据输出到简道云
数据更新专题
应用场景 | 文档 |
---|
数据更新专题:FineDataLink 中常用的数据更新方式,方便用户更好的进行数据开发和维护 | 数据更新专题概述 |
用户希望来源表的增删改同步到目标表的同时,目标表的 update 字段能记录数据变化时间 | 数据比对后更新目标表时间列 |
Excel 数据表为源数据表,每天会新增数据,用户希望数据库中的某张表自动新增 Excel 里面昨天新增的数据 | 每天获取Excel昨日新增数据导入数据库 |
按照「交易日期」按日汇总每日的订单金额,由于补录数据不确定补录时间,例如 9.21 日更新前 5 天的数据,但9.21日补录了「订单交易日期」为 9.1、9.2 日的数据,因此提供汇总数据补录后的增量更新方案。 | 订单补录数据按日汇总增量更新方案 |
工程相关
应用场景
| 文档 |
---|
随着 FineDataLink 工程使用时间的增长,fine_dp_work_exec_record(记录定时任务的执行情况)表中的数据会不断积累,导致数据量逐渐增多。当数据量过大时,打开「任务运维>定时任务>运行记录」页面可能会变得缓慢,需要耗时 10 秒以上 希望能定期清理 fine_dp_work_exec_record 表数据 | 自动清理FineDataLink运行记录 |
公司中有许多成员使用 FineDataLink 开发定时任务,若成员 A 修改了定时任务 1 没有通知成员 B,成员 B 运行定时任务 1 的时候运行报错或数据不对,B 不知道是谁做的修改以及修改原因。成员 B 若是对定时任务 1 再做修改,不知道会对成员 A 造成什么影响 因此,希望使用看板展示所有定时任务的运行信息,可通过搜索对应的任务名称,查看该任务编辑人员、最近编辑时间 | FR模板展示FDL定时任务信息 |
用户想了解某个管道任务是谁编辑的、编辑时间、断点相关信息等,FDL 工程内的 管道任务运维 无法满足需求 | BI仪表板展示管道任务信息
|
FDL 中原先采用的数据连接名为demo1,已在大量定时任务中使用。为了规范数据连接命名,需将此数据连接名更改为fdl_demo,目前需要逐个打开定时任务并手动重新选择新命名的数据连接,操作过程比较麻烦。 | 批量修改定时任务中的数据连接名
|
数据开发专题
调用定时任务相关接口
说明
| 文档 |
---|
提供 FR 模板调用定时任务接口的示例 | FR模板调用定时任务接口示例 |
FR 通过任务名/任务ID运行定时任务的接口中,可设置延迟参数,在等待设置的 X 秒后可以返回任务运行状态 但某些定时任务运行时间较长且不稳定,当 FDL 执行到接口设置的时间但任务还未结束时,FR 会接收到 RUNNING 的返回信息。用户无法确定后续定时任务是否运行成功 | FR调用定时任务后轮询是否完成
|