摘要:1. 概述语法TODATE(参数1, [参数2])函数可以将各种日期形式的参数转换为日期类型。其他格式日期/数字/字符串转日期 返回值类型日期时间参数用法说明详情参见[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.10-4.1.12.2支持「选表」和「通用查询」取数4.2.4.1在填写数据过滤条件时,所有条件符号( = > < 等)前[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本FineBI6.1 版本功能变动4.1.8.2-4.1.8.3BI6.1-4.1.9.1-4.1.10.3请参见文档:版本适配说明4.1.10.4 版[阅读全文:]
摘要:[helpvideo]8610[/helpvideo]1. 概述1.1 版本说明FineDataLink 版本功能变动4.0.14-4.0.24FineDataLink 服务器本地和 FTP/[阅读全文:]
摘要:[helpvideo]8616[/helpvideo]1. 概述1.1 版本FineDataLink 版本功能变动4.0.29「数据转换」节点中新增「Python 算子」4.1.6.2加载文件的默认路径[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.10-4.1.12.2支持「选表」取数算子名称修改为「SAP ERP输入」函数调用配置方式下,导出参数的显示内容,由「...」调整为「[阅读全文:]
摘要:[helpvideo]8613[/helpvideo]1. 概述1.1 版本FineDataLink 版本功能变更4.1.0新增「上下合并」算子,可对多张表进行上下行合并,输出一张合并表4.1.6.1修[阅读全文:]
摘要:1. 概述本文介绍 SparkSQL 中的字符串函数语法。2. 字符串字符数推荐使用FineDataLink 新增计算列中的LEN-返回字符长度。CHAR_LENGTH(s):返回字符串 s[阅读全文:]
摘要:1. 概述本文来介绍 SparkSQL 中的一些常用操作符合语法。2. 常用操作符操作符含义详情=等值比较A=B。如果表达式 A 与表达式 B 相等,则为TRUE;否则为 FALSE在 FineData[阅读全文:]
摘要:1. 概述本文介绍 SparkSQL 中的聚合函数语法。2. COUNT-统计个数示例原表如下图所示:count(*):统计检索出的行的个数,包括 NULL 值的行。 在 SparSQL 中使[阅读全文:]
摘要:1. 概述本文介绍 SparkSQL 中的数学函数语法。2. ROUND-四舍五入取整说明:返回某个数字按指定位数舍入后的数字。用法:ROUND(数值, 舍入位数)数值:要进行四舍五入的数字。舍入位数:[阅读全文:]
摘要:[helpvideo]8607[/helpvideo]1. 概述1.1 版本说明FineDataLink 版本功能变动1.5数据来源中的数据源类型支持 API4.1.3支持分页取数,详情参见:API输入[阅读全文:]
摘要:1. 概述本文介绍 SparkSQL 中的条件函数语法。2. IF-条件判断推荐使用FineDataLink 新增计算列中的 IF-条件判断 函数。操作示例详情参见:新增列[阅读全文:]
摘要:[helpvideo]8617[/helpvideo]1. 概述1.1 版本FineDataLink 版本功能变更3.6.2数据转换节点 新增算子「Spark SQL」算子,可实现较灵活的数据转换功能4[阅读全文:]
摘要:1. 概述1.1 应用场景应用场景一:4.0.24 之前版本,用户希望自动化读取相同类型的文件,为企业降本增效。例如:某国有企业旗下有 100 多家分公司,子公司财务每月需要向总部提交各种财务预算和决算[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.11.3-1.2 应用场景用户通过从关系型数据库中将待检索的数据写入到 Elasticsearch 里,将 Elasticsearch[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动3.1-3.7「DB表输出」算子的「数据去向」Tab 中若选择「自动建表」,「字段映射」Tab 下可删除表字段、修改表字段展示顺序、修改表字段[阅读全文:]
摘要:1. 概述[helpvideo]8614[/helpvideo]1.1 版本FineDataLink 版本功能变动3.3「数据转换」节点新增算子「比对删除」,可将来源表中删除数据的操作同步到目标表4.0[阅读全文:]
摘要:1. 概述1.1 应用场景用户希望将离线 XML 文件内的数据解析成二维表并落库。1.2 实现思路将 XML 文件放置在 FTP 环境或者 FineDataLink 工程的 webroot 下;然后使用[阅读全文:]
摘要:1. 概述1.1 应用场景设备异常处理场景中,多为现场工作人员或 IOT 平台人员发现设备异常,再人工通知维修部进行工单分配,多环节均效率低下。FineDataLink 可基于IOT→FineDataL[阅读全文:]
摘要:1. 概述1.1 应用场景用户数据存储在 SAP 中,因此需要对接 SAP 取数,但是由于数据安全问题或对 SAP 底层表并不了解,无法直接连接 SAP 的底层数据库取数。因此希望调用 SAP 系统内已[阅读全文:]
摘要:[helpvideo]8619[/helpvideo]1. 概述1.1 版本FineDataLink 版本功能变动4.0.20新增简道云输出算子,可将数据输出到简道云中,供简道云使用支持将数据输出到包含[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变更4.1.6.4定时任务支持写入 MongoDB1.2 应用场景有些用户业务系统的数据库是 MongoDB,需要通过定时任务[阅读全文:]
摘要:1. 概述文件输入 文档讲述了「文件输入」算子的基本功能,「文件输入」算子支持从 FineDataLink 服务器本地和 FTP/SFTP 服务器上读取 Excel 和 CSV 文件[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.19-4.1.7.2界面优化4.1.14.1支持设置分组字段,可按照分组字段合并JSON字段1.2 应用场景当用户需要使用 API 输[阅读全文:]
摘要:注:本文方案适用于 4.1.6.2 之后版本。1. 概述1.1 应用场景用户的 JSON 数据中包含多个数组字段,如下图所示:希望解析数组字段,且解析后的字段一一对应。如下图所示:1.2 实现思路使用[阅读全文:]
摘要:注:本文方案适用于 4.1.6.2 之前版本。1. 概述1.1 应用场景用户的 JSON 数据中包含多个数组字段,如下图所示:希望解析数组字段,且解析后的字段一一对应。如下图所示:1.2 实现思路「JS[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变更4.0.4.2数据连接新增 MongoDB 类型「数据转换」节点新增算子「MongoDB输入」,可实现查询MongoDB指定集合数据的功能1.[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.2.0.2-1.2 应用场景用户的业务数据库是 Elasticsearch 数据库,需要定时读取 Elasticsearch 数[阅读全文:]
摘要:1. 概述[helpvideo]8606[/helpvideo]1.1 版本说明FineDataLink 版本功能变动3.1新增节点「数据转换」4.1.2新增「字段拆列」「字段拆行」「分组汇总」算子4.[阅读全文:]
摘要:1. 概述1.1 应用场景SAP RFC 一次性取数过大时,驱动可能会崩溃,FDL 也可能会宕机。部分 RFC 函数提供了 ROWCOUNT、ROWSKIPS 和 date 参数,分[阅读全文:]
摘要:1. 概述1.1 应用场景用户在以下场景时,希望能先清空简道云表单再写入数据:简道云表单数据发生全面更新,需要将数据库增删改数据写入简道云,同时不需要标记增删改历史情况。简道云更新数据量比较小,且有更新[阅读全文:]
摘要:1. 概述1.1 应用场景用户想要将数据库系统数据输出到简道云多个子表单中,实现子表单数据的新增、更新和删除。注:若数据量不大或者简道云表单数据插入没有记录时间的固定字段,推荐使用增删改数据同步至简道云[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.23支持对常量、参数和其他字段进行公式计算或逻辑映射,将结果放到新的一列,参与后续运算或进行输出4.1.8.3在公式编辑可选的参数中,[阅读全文:]
摘要:1. 概述1.1 应用场景用户的 JSON 数据结构是多层数组嵌套,如下图所示:现需要解析上层数组元素和下层数组元素,实现 1:n 的关系。例如:希望 titles 数组中的字段,能与 items 数组[阅读全文:]
摘要:1. 概述[helpvideo]8615[/helpvideo]1.1 版本FineDataLink 版本功能变动3.5「数据转换」节点新增算子「行列转换」,目前支持列转行功能,行转列功能敬请期待4.0[阅读全文:]
摘要:[helpvideo]8608[/helpvideo]1. 概述1.1 版本FineDataLink 版本功能变动3.5.1「数据转换」节点新增算子「JSON 解析」;支持将 JSON 结构的[阅读全文:]
摘要:1. 概述1.1 应用场景用户想使用 新增计算列 算子,获取当月天数。注:SQL 语句获取当月天数方案请自行百度。1.2 实现思路先获取当月第一天日期、下个月第一天日期,然后使用 D[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能说明--4.1.5.1新增加密函数和解密函数1.2 功能说明「编码函数」、「加密函数」、「签名函数」等常用于进行API加密认证取数时的 Token[阅读全文:]
摘要:1. 概述1.1 应用场景用户数据存储在 SAP 中,因此需要对接SAP取数,但是由于数据安全问题或对SAP底层表并不了解,无法直接连接 SAP 的底层数据库取数。因此希望通过RFC接口调用的[阅读全文:]
摘要:1. 概述API输出逻辑说明 已经介绍了API输出的基本功能,用户需要将多应用系统的数据通过FDL打通,实现业务系统间的数据交互(交互的形式为API),就可以通过 API 写入满足应用集成场景。本文以一[阅读全文:]
摘要:1. 概述数据比对功能说明 文档中介绍了「数据比对」算子的功能,本文以一个简单示例介绍该算子的使用。2. 示例示例demo详情参见:https://demo.finedatalink.com/ [阅读全文:]
摘要:[helpvideo]8609[/helpvideo]1. 概述1.1 版本FineDataLink 版本功能变动4.0.9新增「XML解析」算子,可以将输入的 XML 数据解析为行列形式的数据1.2[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.2新增「字段拆列」算子,字段值按照特定规则(分隔符或字符数)拆分,拆分后的结果形成新的多列字段和值4.1.7.3交互优化,选取字段改为[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.2新增「分组汇总」算子,对原始数据根据条件将相同的数据先合并到一组,然后按照分组后的数据进行汇总计算4.1.6.1分组与汇总框支持拖拽[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变更3.6.2数据转换节点 新增算子「Spark SQL」算子,可实现较灵活的数据转换功能4.0.17「Spark SQL」算子支持使用[阅读全文:]
摘要:1. 概述1.1 应用场景从接口取数后,数据保存格式为:{{主数据},{子数据1,子数据2}{子数据a,子数据b}};其中,子数据中包含多个字段,以逗号分割存储。如下图所示:实际业务场景中,每个子数据相[阅读全文:]
摘要:1. 使用位置数据开发>数据转换中的新增计算列2. 函数列表函数说明CHAR-返回指定数值的字符根据指定数字返回对应的字符CONCATENATE-字符拼接将数个字符串合并成一个字符串LEN-返回字[阅读全文:]
摘要:1. 概述注:4.1.11.3 及之后的版本支持该函数。语法UUID()返回通用唯一标识符 (UUID) 字符串。该值以规范的 UUID 36字符串形式返回 返回值类[阅读全文:]
摘要: 1. 概述语法FORMAT(数值/日期时间, 格式)FORMAT(数值/日期时间, 格式)返回「数值/日期时间」的指定「格式」的文本。 [阅读全文:]
摘要:1. 概述语法CONCATENATE(文本1/日期时间1/数值1, 文本2/日期时间2/数值2, ……)将数个值合并成一个值。如果值是数值,直接转成数值字符串(有小数要保留小数)拼接如果值是T[阅读全文:]
摘要: 1. 概述注:4.1.11.3 开始支持此函数。语法REGEXP_SUBSTR(字符串, 正则表达式, 起始位置, 输出组次序, 模式)使用正则表达式提取字符串中相匹配的内容 &[阅读全文:]
摘要:1. 概述1.1 应用场景某国有企业旗下有 100 多家分公司,子公司财务每月需要向总部提交各种财务预算和决算表,如资产负债表、利润表、现金流量表等数据表。总部财务需要手动对相同类型的财务报表进行数据汇[阅读全文:]
摘要:1. 概述[helpvideo]8612[/helpvideo]1.1 版本FineDataLink 版本功能变更3.1「数据转换」节点新增算子「数据关联」1.2 应用场景用户两张数据表在不同的数据库中[阅读全文:]
摘要:1. 概述在对日期型数据进行操作时,经常会遇到要获取当前日期、获取当前时间、获取日期的年月日等等操作。在 FineDataLink 中可以在新增计算列中实现。注:其中的日期字段需要从函数编辑框左侧的字段[阅读全文:]
摘要:1. 概述1.1 应用场景用户 Windows 系统中有多个相同格式的 Excel 文件,需要读取所有文件数据并进行 行转列 操作。由于 文件输入 算子批量读取文件时,是将所有文件数[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.19新增「数据过滤」算子,过滤符合条件的数据4.0.28运算符选择「为空」时,可过滤出值为空格的数据1.2 应用场景用户数据存在空值,[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.5.2-4.1.5.5若「写入方式」设置为直接将数据写入目标表,在设置主键冲突策略中,支持设置「主键相同,覆盖目标表数据」4.1.8.[阅读全文:]
摘要:1. 概述1.1 预期效果Excel 数据表为源数据表,每天会新增数据,用户希望数据库中的某张表自动新增 Excel 里面昨天新增的数据。1.2 实现思路Excel 数据集作为要输入的数据,使用&nbs[阅读全文:]
摘要:1. 概述1.1 应用场景用户想要使用上月末、上年末、上季度末、每个月第一天、最后一天等自定义参数(任务参数)无法直接设置的动态数据作为参数,进行定时任务的开发。1.2 实现思路使用 SparkSQL[阅读全文:]
摘要:1. 概述语法WEEKDAY(文本/日期时间)获取日期并返回星期数。返回值为介于0到6之间的某一整数,分别代表星期中的某一天(从星期日到星期六) 参数serial_number表[阅读全文:]
摘要:1. 概述本文介绍 SparkSQL 中的日期函数语法。本文同时提供新增计算列公式写法和 SparkSQL 语法写法,用户可自行选择。2. 时间戳推荐使用FineDataLink 新增计算列中[阅读全文:]
摘要:1. 概述语法DATEDIF(文本/开始日期, 文本/结束日期, 单位)返回两个指定日期间的天数、月数或年数 参数1文本/开始日期开始日期:代表所指定时间段的初始日[阅读全文:]
摘要:1. 概述1.1 应用场景财务报表、销售数据表、学生成绩表等 Excel 表格中,往往包含多个 Sheet,用户希望使用 FDL 读取单 Excel 多 Sheet 文件数据。1.2 实现思路1)在待读[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变更3.7「数据转换」节点下新增「字段设置」功能,可实现数据流字段的选择、重命名、数据类型转换操作4.1.5.3支持批量删除和还原字段,详情参见本[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.20支持对表中不同字段给予加工处理后再流向不同表1.2 应用场景处理后的数据输出前,用户希望按照不同的过滤条件输出到多张表中,若做多个[阅读全文:]
摘要:[helpvideo]8618[/helpvideo]1. 概述1.1 版本FineDataLink 版本功能变动4.0.26新增「文件输出」算子,可将数据输出为 CSV 类型的文件4.0.30可将数据[阅读全文:]
摘要:1. 概述[helpvideo]8615[/helpvideo]1.1 版本说明版本功能变动4.0.15-1.2 应用场景行转列可将一维表转成二维表。一维表也常称为流水线表格。一般有固定的列名,平常输入[阅读全文:]
摘要:1. 概述[helpvideo]8611[/helpvideo]1.1 版本FineDataLink 版本功能变更4.0.2.1数据连接新增「简道云」类型「数据转换」节点新增算子「简道云输入」1.2 应[阅读全文:]
摘要:1. 概述1.1 应用场景公司人员信息保存在简道云表单中,在公司内部,有些人可能会同时担任多个职位,如王小明既是总经理又在财务部工作。在王小明出差时,为了方便报销,需要将他所在的多个部门展示出来,方便后[阅读全文:]
摘要:1. 概述1.1 预期效果在搭建数据仓库时,可能需要对重复的脏数据进行去重,此时可以使用 SparkSQL 算子中的 GROUP BY 进行处理。例如:有的订单数据不小心触发了两次,一个订单有两个订单数[阅读全文:]
摘要:1. 概述数仓需要接收来自不同源的大量数据,数据之间可能存在格式、口径、数值上的差异。因此不可避免会出现缺失数据,本文介绍如何对缺失值进行处理。示例数据:internet_v.xls2. 删除缺失值如果[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.2新增「字段拆行」算子,字段值按照特定规则(分隔符)拆分,拆分后的结果形成新的一列字段和值4.1.7.3交互优化,选取字段改为「待拆分[阅读全文:]
摘要:1. 概述对于 API、WebService、OData 接口中响应数据返回的 XML 格式数据、来自 XML 文件的数据,用户想要将其解析为行列格式数据,以供后续加工存储。「XML解析」算子[阅读全文:]
摘要:1. 概述1.1 应用场景大数据量场景下的 json 数据解析,存在问题如下:如果存在几条不合法的 json 格式数据,解析时会导致整个定时任务运行终止。json 解析是数据处理过程,定时任务的脏数据容[阅读全文:]
摘要:1. 概述JSON解析算子功能说明 文档中已介绍「JSON 解析」算子的功能,本文以一个简单示例介绍该算子的使用。2. 示例2.1 场景模拟图书数据是以 JSON 格式存储的,保存在接口数据中。http[阅读全文:]
摘要:1. 概述1.1 预期效果用户有两张表,存在不同的数据库中,表数据包含姓名和科目成绩,想要这两张表合并为一张表,且新增一列为科目成绩的总和,将最终数据输出到指定数据库中。1.2 实现思路先将两张成绩表通[阅读全文:]
摘要:1. 概述1.1 应用场景用户希望来源表的增删改同步到目标表的同时,目标表的 update 字段能记录数据变化时间。「数据比对」算子可以进行增删改标记,通过自动生成 fdl_comp[阅读全文:]
摘要:1. 概述「简道云输出」算子的功能已在 简道云输出文档 中详细介绍,本文将通过两个示例介绍该算子的使用方法:示例一:简道云表单中不包含部门成员字段。示例二:简道云表单中包含部门成员字[阅读全文:]
摘要:1. 概述简道云输入功能说明 文档中已介绍「简道云输入」算子的功能,本文以一个简单示例介绍该算子的使用。demo 示例详情参见:https://demo.finedatalink.com/&n[阅读全文:]
摘要:1. 概述1.1 应用场景简道云表单中包含两个子表单,其中一个子表单中包含成员单选、部门单选控件。如下图所示:已有数据如下图所示,现希望将该表单的数据落库。1.2 实现思路使用「简道云输入」算子读取表单[阅读全文:]
摘要:1. 概述1.1 应用场景FTP 服务器上的文件不定期自动更新,每次通过新建文件更新数据。用户希望自动读取这些文件的所有信息并将信息存储到数据库表中。1.2 实现思路文件输入 算子+参数实现。「文件输入[阅读全文:]
摘要:1. 概述1.1 版本说明FineDataLink 版本功能变动4.0.9请求类型为POST时,「请求参数」支持传入XML格式数据对于GET与POST请求,支持输出XML格式数据,支持预览XML响应结果[阅读全文:]
摘要:1. 概述本文为您介绍 JSON解析 相关问题。解析 JSON 数据前,建议查看:解析 JSON 数据 内容。2. 报错及解决方案包含转义字符问题描述:报错:JSON节点获取失败原因分析:用户[阅读全文:]
摘要:1. 概述本文为您介绍 XML解析 相关问题。2. XML 数据结构是否标准异常现象:选择节点是会报错:com.fr.dp.exception.FineDPException: xm[阅读全文:]
摘要:1. 概述语法ISNULL(参数)判断对象中的值是否是NULL。结果为NULL,返回TRUE,否则返回FALSE。注:仅支持单个参数判断。 &nbs[阅读全文:]
摘要:1. 概述1.1 应用场景文件输出算子 可将数据按行数拆分至多个文件,但存在以下问题:场景问题每次运行后,被拆分的文件存在重名情况用户多次运行任务,根据数据量不同,被拆分的文件个数可能不同若用[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.4新增「备注说明」节点,可为任务添加备注各节点新增「节点信息」Tab,存放节点名称、节点备注信息4.0.8「备注说明」节点可覆盖其他节[阅读全文:]
摘要:1. 概述语法NOW()获取当前时间 返回值类型日期时间注:若需要获取不带时分秒的当前时间,可使用TODAY-当前日期2. 示例公式结果[阅读全文:]
摘要:1. 概述进行数据处理时,经常需要将数据表进行连接,本文介绍在 FineDataLink 中的多种连接方式。2. 左连接LEFT JOIN(左连接)和 LEFT OUTER JOIN(左外连接) :返回[阅读全文:]
摘要:1. 概述简道云输入 算子中,配置筛选条件时,不同类型的字段支持的过滤条件不同,本文进行说明。2. 功能介绍字段类型支持的过滤方式过滤选项flowState等于(默认)进行中、流转完成、手动结束(没有默[阅读全文:]
摘要:1. 概述1.1 应用场景在 API取数中有时需要日期序列作为 body 值输入(例如 body 中使用 date 值按照日期依次取出当月1号到任务运行当天中每天的数据);此时就需要构建自定义开始时间为[阅读全文:]
摘要:1. 概述在不影响原有字段的情况下,「新增计算列」算子可利用原有字段通过引用或计算获得一个新的字段。本文介绍「新增计算列」算子中公式的组成和正确写法格式。2. 公式组成公式计算由四个内容组成:内容说明函[阅读全文:]
摘要:1. 概述本文介绍 新增计算列算子 支持的数值函数。2. ABS-绝对值ABS(数值)简介返回数字绝对值公式逻辑ABS(数值)返回指定数字的绝对值,恒为非负数。如果参数中有NULL,则结果为N[阅读全文:]
摘要:1. 概述新增列_条件赋值 支持根据指定条件进行赋值,形成新的数据列。如果用户只想对已有数据进行分组赋值,不需要设置判断条件,可以直接使用内置公式 SWITCH-分组赋值。2. 操作[阅读全文:]
摘要:1. 使用位置数据开发>数据转换中的新增计算列2. 函数列表函数说明DATETONUMBER-日期转化为13位时间戳返回自1970年1月1日00:00:00GMT经过的毫秒数。YEAR-返回年份返[阅读全文:]
摘要:1. 使用位置数据开发>数据转换中的新增计算列2. 函数列表函数说明IF-条件判断进行条件判断,如果指定条件的计算结果为 TRUE,IF 函数将返回某个值;如果该条件的计算结果为 FALSE,则返[阅读全文:]
摘要:1. 概述语法TODAY()是获取当前的日期。返回值类型日期时间2. 注意事项没有参数。若需要获取带时分秒的当前时间,可使用NOW-当前时间3. 示例公式说明TODAY()返回当前日期[阅读全文:]