历史版本25 :最佳实践合集 返回文檔
編輯時間:
內容長度:图片数:目录数:
修改原因:
目錄:
概述编辑
本文对帮助文档中 FineDataLink 的实际应用文档进行筛选、整理、归类、排版，形成了内容合辑，文章按难易程度、内容模块整理分类为不同的篇章，点击标题即可进入相应文章。
持续更新中……
数仓搭建编辑
| 说明 | 文档 |
|---|---|
| 数据仓库搭建和调度方案一 | 数仓调度场景概述 |
| 数据仓库搭建和调度方案二 | 数据仓库搭建方案二 |
| 实时ODS层数仓搭建方案 | 实时ODS层数仓搭建方案 |
| 如何在增量更新时生成记录数据更新生命周期的数仓拉链表 | 数仓拉链表 |
| 在增量更新过程中，若遇到字段异常值、脏数据等问题，将导致数据同步一段时间后任务失败。此时目标表中已同步了部分数据，可将目标表进行数据回滚到此次增量更新前的数据 | 数据抽取失败后进行数据回滚 |
| 人事系统数据仓库搭建 | 人事系统数据仓库建设 |
| 订单补录数据按日汇总增量更新方案 | 订单补录数据按日汇总增量更新方案 |
业务系统读写分离编辑
| 说明 | 文档 |
|---|---|
| 业务数据库定期归档，实现读写分离，提升数据库稳定性并且进行迁移备份 | 业务系统数据定期归档 |
帆软产品组合应用编辑
| 说明 | 文档 |
|---|---|
| 帆软产品组合应用方案（FineReport、FineBI、简道云） | FDL和FR组合应用示例 |
| FDL和BI组合应用示例 | |
| FDL&简道云&BI组合应用示例 | |
| FR填报补录数据后，触发FDL任务更新 | |
| FR模板展示定时任务信息 |
数据实时传输编辑
| 说明 | 文档 |
|---|---|
| 高时效数据实时同步，实现实时监控大屏、实时监控车间看板等场景，支撑快速决策分析 | 数据管道概述 |
数据告警编辑
| 说明 | 文档 |
|---|---|
| 使用企业微信群进行消息通知 |
API专题编辑
| 分类 | 文档 |
|---|---|
| API 专题：包含FineDataLink 支持额所以 API 使用方案 | API 专题 |
| 介绍API 接口相关入门知识，便于您后续使用 FDL 进行开发 | API入门 |
API取数-落库 实战实践 | API取数-限制取数量且无页数参数 |
| API取数-获取企业微信人员信息 | |
| API取数-按页数取数 | |
| API取数-加密身份验证&按页数取数 | |
| API循环取数时取出数据为空 | |
| API取数-获取当月企微月报打卡数据 | |
| 将经纬度数据转换为中文地址 | |
| API取数-金蝶云星空销售报价单 | |
| API取数-易流云MD5加密 | |
| API取数-慧策接口获取库存全量数据 （嵌套循环替代方案） | |
| 活动日程信息更新至企业微信日程 | |
| API取数-钉钉获取部门通讯录数据 | |
| 使用高德接口获取城市天气数据 | |
| 活动日程信息更新至企业微信日程 | |
| 仅在工作日执行定时任务 | |
| 将多个应用系统的数据通过FDL打通，实现业务系统间的数据交互（交互的形式为API） | API输出逻辑说明 |
| API 发布 | 数据服务概述 |
FineBI 数据落库编辑
| 说明 | 文档 |
|---|---|
| FineBI 的公共数据，通过FDL完成数据落库，FR 等数据分析工具可应用以上数据进行展示分析 | 数据集输入-公共数据 |
数据服务编辑
| 说明 | 文档 |
|---|---|
某公司旗下各个地区有多个分公司和分店，且使用的同一套业务系统。 业务数据会全部汇总到总部的数据库内，分店只能在业务系统上看到特定的分析和数据，无法实现自定义分析。 总部希望对数据进行分权限管控：总部按照地区提供数据，一个地区分店和分公司只能看到自己地区的数据，不允许看到其他地区的数据，各地区自行获取数据后在不同工具中进行数据分析和使用。 | 使用数据服务对数据分权限管控 |
读取简道云数据/数据输出到简道云编辑
| 分类 | 说明 | 文档 |
|---|---|---|
| 读取简道云数据 | 将简道云数据下云，取数到指定数据库中进行数据应用 | 简道云数据增删改同步至数据库 |
| 公司出差表单中，包含「部门多选」字段，有些成员担任多个职位，属于多个部门。希望将简道云数据保存到数据库中，且用一个字段代表成员的所属部门 | 提取简道云表单多值字段并显示为一行 | |
| 简道云表单中包含两个子表单，其中一个子表单中包含成员单选、部门单选控件。将该表单数据落库 | 将包含两个子表单的简道云表单数据落库 | |
| 数据输出到简道云 | 将数据库数据推送至简道云表单中 | 简道云输出 |
数据更新专题编辑
| 应用场景 | 文档 |
|---|---|
| 数据更新专题：FineDataLink 中常用的数据更新方式，方便用户更好的进行数据开发和维护 | 数据更新专题概述 |
| 用户希望来源表的增删改同步到目标表的同时，目标表的 update 字段能记录数据变化时间 | 数据比对后更新目标表时间列 |
| Excel 数据表为源数据表，每天会新增数据，用户希望数据库中的某张表自动新增 Excel 里面昨天新增的数据 | 每天获取Excel昨日新增数据导入数据库 |
| 按照「交易日期」按日汇总每日的订单金额，由于补录数据不确定补录时间，例如 9.21 日更新前 5 天的数据，但9.21日补录了「订单交易日期」为 9.1、9.2 日的数据，因此提供汇总数据补录后的增量更新方案。 | 订单补录数据按日汇总增量更新方案 |
工程相关编辑
| 应用场景 | 文档 |
|---|---|
随着 FineDataLink 工程使用时间的增长，fine_dp_work_exec_record（记录定时任务的执行情况）表中的数据会不断积累，导致数据量逐渐增多。当数据量过大时，打开「任务运维>定时任务>运行记录」页面可能会变得缓慢，需要耗时 10 秒以上 希望能定期清理 fine_dp_work_exec_record 表数据 | 自动清理FineDataLink运行记录 |
公司中有许多成员使用 FineDataLink 开发定时任务，若成员 A 修改了定时任务 1 没有通知成员 B，成员 B 运行定时任务 1 的时候运行报错或数据不对，B 不知道是谁做的修改以及修改原因。成员 B 若是对定时任务 1 再做修改，不知道会对成员 A 造成什么影响 因此，希望使用看板展示所有定时任务的运行信息，可通过搜索对应的任务名称，查看该任务编辑人员、最近编辑时间 | FR模板展示FDL定时任务信息 |
数据开发专题编辑
文件输入
| 说明 | 文档 |
|---|---|
| 读取单个文件数据 | 文件输入算子读取单个文件 |
| 批量读取指定文件夹下的文件数据 | 定时批量扫描文件同步数据 |
| 使用参数取出文件名有规律的文件数据 | 基于时间增量读取文件 |
其他
| 文档 |
|---|
| 多张Excel表数据关联后再进行加工计算 |
| 使用条件分支获取优秀员工信息 |
| 解析XML文件数据 |
| 使用SparkSQL构建日期列并循环取数 |
| 调用循环容器任务 |
| 解析并关联多个JSON数组字段 |