Demo更新日志

  • 文档创建者:Roxy
  • 历史版本:19
  • 最近更新:Roxy 于 2022-12-27
  • 2022-12

    简介任务查看效果展示

    某企业现在需要将某业务工单数据全部取出以供业务分析使用。

    由于数据量比较大,不可能一次性取全量数据,因此需要使用参数。

    接口文档中 pageIndex 表示数据页数;pageSize 表示在每一页的数据条数。

    官方DEMO

    「场景案例>API接口专题>API取数-按页数取数

    配套文档:API取数-按页数取数

    某企业现在需要将简道云OA系统表单数据全部取出以供业务分析使用。

    接口文档中没有页数相关的参数,因此不能使用API取数-按页数取数方案。

    但是接口中有 limit 参数限制接口取数量。

    官方DEMO

    「场景案例>API接口专题>API取数-限制取数量」

    配套文档:API取数-限制取数量且无页数参数

    用户期望能够对数据进行处理后直接输出参数供后续数据处理使用,不需要将处理结果输出数据库在从数据库取值作为参数。

    此时可以使用「参数输出」功能


    官方DEMO

    「01最新功能>4.0.13 参数输出」

    配套文档:参数输出

    用户在搭建数仓时,希望能从 FineDataLink 服务器本地或者共享目录中读取 Excel 、CSV 文件数据。

    同时可以通过 FDL 将Excel 、CSV 文件直接上传至 FDL 服务器本地。

    FineDataLink 支持「文件输入」功能。

    官方DEMO

    「01最新功能>4.0.14 文件输入」

    配套文档:文件输入

    2022-11 

    简介任务查看效果展示
    • 使用「数据管道」进行批量原表原样的实时数据同步,构建数仓 ODS 层数据

    • 使用「数据同步」将ODS层数据表中新增部分,写入到 DW 层数据表

    • 将 DW 层的数据进行汇总,集中至 DM 层数据表数据表。


    官方DEMO

    场景案例>数据仓库场景」下的「04实时&定时组合数仓调度示例」

    配套文档:实时&定时组合数仓调度示例

    2022-10

    简介任务查看效果展示

    「参数赋值」节点设置参数,然后将参数传入 shell 脚本中远程调用执行脚本文件。

    官方DEMO

    「01功能示例>01最新功能> shell 脚本」

    配套文档:Shell脚本

    通过 API 取数将 XML 格式的数据取出,并通过XML 解析成二维数据格式



    官方DEMO

    01功能示例>01最新功能>XML 解析

    配套文档:XML解析

    参数赋值默认生成的是一条数据,也就是「安道尔,阿富汗,阿尔巴尼亚,澳大利亚」作为一条参数。
    希望将参数值一条条传入取出的,取出满足参数的数据,因此需要使用循环容器将参数值一条条赋予SAP。

    官方DEMO

    「01功能示例>01最新功能>SAP RFC 」

    配套文档:SAP RFC取数概述

    2022-09

    简介任务查看效果展示

    将简道云数据落库至数据库并实现定时更新,同步表单中的增删改数据,便于后续进行数据分析和整理应用。

    官方DEMO

    「数据开发场景>09简道云定时同步数据库」

    配套文档:简道云数据定时取数至数据库

    本文主要介绍简道云数据落库并实现定时更新;与其他数据库进行跨数据库关联形成宽表后再 BI 中制作可视化看板的全流程。

    官方DEMO

    「02场景案例>帆软产品组合应用>FDL&简道云&BI组合方案」

    配套文档:FDL&简道云&BI组合应用示例

    在进行数据处理过程中,为了保证数据的时效性,数据更新就显得至关重要,只有数据有时效,才能被持续的应用在业务中。

    根据用户的数据结构和更新需求,整理了一些在 FineDataLink 中常用的数据更新方式,方便用户更好的进行数据处理和维护。

    官方DEMO

    「02场景案例>更新专题」

    配套文档:数据更新专题

    在现实的业务中,有很多数据需要通过 API 接口调用使用。

    因此为用户介绍一些常用的在 FineDataLink 中使用 API 进行数据处理的场景。

    官方DEMO

    「01功能示例>01.参数赋值-API Token传递」

    配套文档:API 专题概述

    2022-08

    简介任务查看效果展示

    数据拉链表就是在原表的基础上,新增两列记录每条数据记录的生命周期开始和结束时间。这张数据表只增不减,记录数据更新状态。

    官方DEMO

    「场景案例>数据仓库场景」下的「03数仓拉链表」

    配套文档:数仓拉链表

    数据仓库的调度配置是实际业务中必不可少的一环。通过调度配置,可以实现数据的更新同步,从而让数据持续的应用在业务中。

    官方DEMO

    「场景案例>数据仓库场景」下的「数据仓库调度」文件夹。

    配套文档:数仓调度场景概述

    通过 FDL 与FR 组合使用,业务系统数据经过FDL处理落库后,FineReport 调用该数据进行报表开发全流程,

    以解决当前在数据处理和报表开发中遇到的问题。


    官方DEMO

    「场景案例>帆软产品组合应用>FDL&FR组合应用」

    配套文档:FDL和FR组合应用示例

    通过 FDL 与 BI 组合使用,业务系统数据经过FDL处理落库后,FineBI 调用该数据进行进行自助分析的全流程,

    以解决当前在数据处理和自助分析中遇到的问题。

    官方DEMO 「场景案例>帆软产品组合应用>FDL&FR组合应用」

    配套文档:FDL和BI组合应用示例

    对比删除

    通过使用「数据同步」、「对比删除」等功能,实现将「来源表」中增删改的数据同步至「目标表」


    官方DEMO 「01.功能示例>03步骤>05.对比删除」

    配套文档:来源表数据增删改同步至目标表

    功能示例中「数据开发」任务全局梳理,补充示例和备注说明

    便于您更好的理解产品


    官方DEMO 「01.功能示例」

    数据同步-数据库数据

    FDL 支持数据读取和写入功能,便于对数据进行同步,同时可以结合参数,将源数据库中全量或增量数据的同步至目标数据库中。  


    官方DEMO 「01.功能示例>01通用>01数据同步>数据同步-数据库同步」

    数据同步-API示例一

    通过 API 接口将数据取出并将其存放至对应的数据库中。 



    官方DEMO 「01.功能示例>01通用>01数据同步>数据同步-API示例一」

    JSON 解析

    解析 JSON 结构的数据,将其输出为行列格式的数据,以便后续进行数据处理和使用。  



    官方DEMO 「01.功能示例>01通用>02数据转换>JSON解析」

    Spark SQL

    通过使用 Spark SQL ,可以将上游输出的数据,使用 Spark SQL 对其进行查询和处理,并输出给下游,以此进行数据的加工处理



    官方DEMO 「01.功能示例>01通用>02数据转换> Sparksql」

    自动建表API取数

    在使用 API 取数后,解析取出的 JSON 数据,形成数据表数据



    官方DEMO 「01.功能示例>01通用>02数据转换>自动建表API取数」

    SQL 脚本

    对数据库中的数据进行处理时,例如创建、更新、删除、读取、关联、汇总这样的操作,可以通过「SQL脚本」节点实现。  



    官方DEMO 「01.功能示例>02脚本>SQL脚本-简单示例」

    参数赋值-表输出参数

    通过参数,实现上游节点运行的结果能够被下游节点使用



    官方DEMO 「01.功能示例>03步骤>02.参数赋值-表输出参数」

    参数赋值-API Token传递

    将数据同步API 和参数赋值联合使用,实现从API中将指定数据取出的场景



    官方DEMO 「01.功能示例>03步骤>01.参数赋值-API Token传递」


    附件列表


    主题: 数据开发-定时任务
    • 有帮助
    • 没帮助
    • 只是浏览
    • 评价文档,奖励 1 ~ 100 随机 F 豆!