"数据转换" 分类下的文档该分类下有139篇文档创建该分类下的文档
TODATE-转换为日期格式
文档创建者:Roxy      创建时间:06-19 16:45      标签:      编辑:3次    |   浏览:3671次

摘要:1. 概述语法TODATE(参数1, [参数2])函数可以将各种日期形式的参数转换为日期类型。其他格式日期/数字/字符串转日期    返回值类型日期时间参数用法说明详情参见[阅读全文:]

SAP ERP选表查询
文档创建者:Roxy      创建时间:08-28 16:59      标签:      编辑:6次    |   浏览:897次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.10-4.1.12.2支持「选表」和「通用查询」取数4.2.4.1在填写数据过滤条件时,所有条件符号( = > < 等)前[阅读全文:]

数据集输出
文档创建者:Roxy      创建时间:05-21 11:17      标签:      编辑:32次    |   浏览:3371次

摘要:1. 概述1.1 版本FineDataLink 版本FineBI6.1 版本功能变动4.1.8.2-4.1.8.3BI6.1-4.1.9.1-4.1.10.3请参见文档:版本适配说明4.1.10.4 版[阅读全文:]

文件输入功能说明
文档创建者:Roxy      创建时间:11-29 18:12      标签:      编辑:50次    |   浏览:12253次

摘要:[helpvideo]8610[/helpvideo]1. 概述1.1 版本说明FineDataLink 版本功能变动4.0.14-4.0.24FineDataLink 服务器本地和 FTP/[阅读全文:]

Python 算子
文档创建者:Wendy123456      创建时间:09-06 11:40      标签:      编辑:46次    |   浏览:9008次

摘要:[helpvideo]8616[/helpvideo]1. 概述1.1 版本FineDataLink 版本功能变动4.0.29「数据转换」节点中新增「Python 算子」4.1.6.2加载文件的默认路径[阅读全文:]

SAP ERP取数概述
文档创建者:Roxy      创建时间:09-28 17:08      标签:      编辑:19次    |   浏览:6292次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.10-4.1.12.2支持「选表」取数算子名称修改为「SAP ERP输入」函数调用配置方式下,导出参数的显示内容,由「...」调整为「[阅读全文:]

上下合并
文档创建者:Wendy123456      创建时间:10-23 09:58      标签:      编辑:9次    |   浏览:3300次

摘要:[helpvideo]8613[/helpvideo]1. 概述1.1 版本FineDataLink 版本功能变更4.1.0新增「上下合并」算子,可对多张表进行上下行合并,输出一张合并表4.1.6.1修[阅读全文:]

SparkSQL字符串函数
文档创建者:Roxy      创建时间:06-13 19:15      标签:      编辑:9次    |   浏览:5437次

摘要:1. 概述本文介绍 SparkSQL 中的字符串函数语法。2. 字符串字符数推荐使用FineDataLink 新增计算列中的LEN-返回字符长度。CHAR_LENGTH(s):返回字符串 s[阅读全文:]

SparkSQL常用语法
文档创建者:Roxy      创建时间:06-13 19:18      标签:      编辑:6次    |   浏览:5815次

摘要:1. 概述本文来介绍 SparkSQL 中的一些常用操作符合语法。2. 常用操作符操作符含义详情=等值比较A=B。如果表达式 A 与表达式 B 相等,则为TRUE;否则为 FALSE在 FineData[阅读全文:]

SparkSQL聚合函数
文档创建者:Roxy      创建时间:06-12 18:20      标签:      编辑:6次    |   浏览:3510次

摘要:1. 概述本文介绍 SparkSQL 中的聚合函数语法。2. COUNT-统计个数示例原表如下图所示:count(*):统计检索出的行的个数,包括 NULL 值的行。 在 SparSQL 中使[阅读全文:]

SparkSQL数学函数
文档创建者:Roxy      创建时间:06-20 14:52      标签:      编辑:6次    |   浏览:3141次

摘要:1. 概述本文介绍 SparkSQL 中的数学函数语法。2. ROUND-四舍五入取整说明:返回某个数字按指定位数舍入后的数字。用法:ROUND(数值, 舍入位数)数值:要进行四舍五入的数字。舍入位数:[阅读全文:]

API输入
文档创建者:Roxy      创建时间:08-10 19:12      标签:      编辑:52次    |   浏览:19500次

摘要:[helpvideo]8607[/helpvideo]1. 概述1.1 版本说明FineDataLink 版本功能变动1.5数据来源中的数据源类型支持 API4.1.3支持分页取数,详情参见:API输入[阅读全文:]

SparkSQL条件函数
文档创建者:Roxy      创建时间:06-12 18:11      标签:      编辑:3次    |   浏览:3418次

摘要:1. 概述本文介绍 SparkSQL 中的条件函数语法。2. IF-条件判断推荐使用FineDataLink 新增计算列中的 IF-条件判断 函数。操作示例详情参见:新增列[阅读全文:]

Spark SQL
文档创建者:Wendy123456      创建时间:03-16 16:10      标签:      编辑:32次    |   浏览:13670次

摘要:[helpvideo]8617[/helpvideo]1. 概述1.1 版本FineDataLink 版本功能变更3.6.2数据转换节点 新增算子「Spark SQL」算子,可实现较灵活的数据转换功能4[阅读全文:]

循环多次读取Linux环境文件同步数据
文档创建者:Wendy123456      创建时间:04-14 13:58      标签:      编辑:29次    |   浏览:3151次

摘要:1. 概述1.1 应用场景应用场景一:4.0.24 之前版本,用户希望自动化读取相同类型的文件,为企业降本增效。例如:某国有企业旗下有 100 多家分公司,子公司财务每月需要向总部提交各种财务预算和决算[阅读全文:]

Elasticsearch输出
文档创建者:Roxy      创建时间:08-06 12:06      标签:      编辑:6次    |   浏览:1110次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.11.3-1.2 应用场景用户通过从关系型数据库中将待检索的数据写入到 Elasticsearch 里,将 Elasticsearch[阅读全文:]

DB表输出
文档创建者:Wendy123456      创建时间:02-14 14:18      标签:      编辑:29次    |   浏览:12964次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动3.1-3.7「DB表输出」算子的「数据去向」Tab 中若选择「自动建表」,「字段映射」Tab 下可删除表字段、修改表字段展示顺序、修改表字段[阅读全文:]

数据比对功能说明
文档创建者:Wendy123456      创建时间:07-20 15:24      标签:      编辑:22次    |   浏览:7816次

摘要:1. 概述[helpvideo]8614[/helpvideo]1.1 版本FineDataLink 版本功能变动3.3「数据转换」节点新增算子「比对删除」,可将来源表中删除数据的操作同步到目标表4.0[阅读全文:]

解析XML文件数据
文档创建者:Roxy      创建时间:08-08 15:52      标签:      编辑:6次    |   浏览:2188次

摘要:1. 概述1.1 应用场景用户希望将离线 XML 文件内的数据解析成二维表并落库。1.2 实现思路将 XML 文件放置在 FTP 环境或者 FineDataLink 工程的 webroot 下;然后使用[阅读全文:]

数据上云且触发智能助手
文档创建者:Wendy123456      创建时间:12-23 19:53      标签:      编辑:4次    |   浏览:331次

摘要:1. 概述1.1 应用场景设备异常处理场景中,多为现场工作人员或 IOT 平台人员发现设备异常,再人工通知维修部进行工单分配,多环节均效率低下。FineDataLink 可基于IOT→FineDataL[阅读全文:]

不带参数的SAP函数调用取数
文档创建者:Roxy      创建时间:09-27 11:18      标签:      编辑:14次    |   浏览:3212次

摘要:1. 概述1.1 应用场景用户数据存储在 SAP 中,因此需要对接 SAP 取数,但是由于数据安全问题或对 SAP 底层表并不了解,无法直接连接 SAP 的底层数据库取数。因此希望调用 SAP 系统内已[阅读全文:]

简道云输出算子
文档创建者:Roxy      创建时间:02-24 14:36      标签:      编辑:48次    |   浏览:7632次

摘要:[helpvideo]8619[/helpvideo]1. 概述1.1 版本FineDataLink 版本功能变动4.0.20新增简道云输出算子,可将数据输出到简道云中,供简道云使用支持将数据输出到包含[阅读全文:]

MongoDB输出
文档创建者:Wendy123456      创建时间:03-27 11:36      标签:      编辑:6次    |   浏览:1877次

摘要:1. 概述1.1 版本FineDataLink 版本功能变更4.1.6.4定时任务支持写入 MongoDB1.2 应用场景有些用户业务系统的数据库是 MongoDB,需要通过定时任务[阅读全文:]

文件输入算子读取单个文件
文档创建者:Wendy123456      创建时间:05-25 11:24      标签:      编辑:8次    |   浏览:3245次

摘要:1. 概述文件输入 文档讲述了「文件输入」算子的基本功能,「文件输入」算子支持从 FineDataLink 服务器本地和 FTP/SFTP 服务器上读取 Excel 和 CSV 文件[阅读全文:]

JSON生成
文档创建者:Roxy      创建时间:02-15 14:15      标签:      编辑:11次    |   浏览:6215次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.19-4.1.7.2界面优化4.1.14.1支持设置分组字段,可按照分组字段合并JSON字段1.2 应用场景当用户需要使用 API 输[阅读全文:]

解析并关联多个JSON数组字段(4.1.6.2及其后版本)
文档创建者:Roxy      创建时间:12-16 17:11      标签:      编辑:1次    |   浏览:289次

摘要:注:本文方案适用于 4.1.6.2 之后版本。1. 概述1.1 应用场景用户的 JSON 数据中包含多个数组字段,如下图所示:希望解析数组字段,且解析后的字段一一对应。如下图所示:1.2 实现思路使用[阅读全文:]

解析并关联多个JSON数组字段(4.1.6.2之前版本)
文档创建者:Wendy123456      创建时间:08-25 11:16      标签:      编辑:12次    |   浏览:3219次

摘要:注:本文方案适用于 4.1.6.2 之前版本。1. 概述1.1 应用场景用户的 JSON 数据中包含多个数组字段,如下图所示:希望解析数组字段,且解析后的字段一一对应。如下图所示:1.2 实现思路「JS[阅读全文:]

MongoDB输入
文档创建者:Wendy123456      创建时间:06-27 18:54      标签:      编辑:18次    |   浏览:6515次

摘要:1. 概述1.1 版本FineDataLink 版本功能变更4.0.4.2数据连接新增 MongoDB 类型「数据转换」节点新增算子「MongoDB输入」,可实现查询MongoDB指定集合数据的功能1.[阅读全文:]

Elasticsearch输入
文档创建者:Roxy      创建时间:11-12 15:53      标签:      编辑:2次    |   浏览:663次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.2.0.2-1.2 应用场景用户的业务数据库是 Elasticsearch 数据库,需要定时读取 Elasticsearch 数[阅读全文:]

数据转换概述
文档创建者:Wendy123456      创建时间:03-17 10:49      标签:      编辑:56次    |   浏览:23102次

摘要:1. 概述[helpvideo]8606[/helpvideo]1.1 版本说明FineDataLink 版本功能变动3.1新增节点「数据转换」4.1.2新增「字段拆列」「字段拆行」「分组汇总」算子4.[阅读全文:]

SAP RFC:日期+偏移量双重循环取数
文档创建者:Wendy123456      创建时间:11-14 15:51      标签:      编辑:4次    |   浏览:476次

摘要:1. 概述1.1 应用场景SAP RFC 一次性取数过大时,驱动可能会崩溃,FDL 也可能会宕机。部分 RFC 函数提供了 ROWCOUNT、ROWSKIPS 和 date 参数,分[阅读全文:]

增删改数据同步至简道云表单(清空目标表,再写入数据)
文档创建者:Wendy123456      创建时间:03-25 11:33      标签:      编辑:9次    |   浏览:1803次

摘要:1. 概述1.1 应用场景用户在以下场景时,希望能先清空简道云表单再写入数据:简道云表单数据发生全面更新,需要将数据库增删改数据写入简道云,同时不需要标记增删改历史情况。简道云更新数据量比较小,且有更新[阅读全文:]

多个简道云子表单增删改输出
文档创建者:Roxy      创建时间:04-02 17:05      标签:      编辑:10次    |   浏览:1926次

摘要:1. 概述1.1 应用场景用户想要将数据库系统数据输出到简道云多个子表单中,实现子表单数据的新增、更新和删除。注:若数据量不大或者简道云表单数据插入没有记录时间的固定字段,推荐使用增删改数据同步至简道云[阅读全文:]

新增计算列功能说明
文档创建者:Wendy123456      创建时间:05-09 17:25      标签:      编辑:15次    |   浏览:6367次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.23支持对常量、参数和其他字段进行公式计算或逻辑映射,将结果放到新的一列,参与后续运算或进行输出4.1.8.3在公式编辑可选的参数中,[阅读全文:]

解析多层嵌套JSON并实现1:n关系
文档创建者:Wendy123456      创建时间:10-11 16:02      标签:      编辑:5次    |   浏览:1071次

摘要:1. 概述1.1 应用场景用户的 JSON 数据结构是多层数组嵌套,如下图所示:现需要解析上层数组元素和下层数组元素,实现 1:n 的关系。例如:希望 titles 数组中的字段,能与 items 数组[阅读全文:]

列转行
文档创建者:Wendy123456      创建时间:03-17 10:55      标签:      编辑:22次    |   浏览:9587次

摘要:1. 概述[helpvideo]8615[/helpvideo]1.1 版本FineDataLink 版本功能变动3.5「数据转换」节点新增算子「行列转换」,目前支持列转行功能,行转列功能敬请期待4.0[阅读全文:]

JSON解析算子功能说明
文档创建者:Wendy123456      创建时间:07-31 09:21      标签:      编辑:25次    |   浏览:6483次

摘要:[helpvideo]8608[/helpvideo]1. 概述1.1 版本FineDataLink 版本功能变动3.5.1「数据转换」节点新增算子「JSON 解析」;支持将 JSON 结构的[阅读全文:]

新增计算列获取当月天数
文档创建者:Wendy123456      创建时间:09-20 11:13      标签:      编辑:4次    |   浏览:525次

摘要:1. 概述1.1 应用场景用户想使用 新增计算列 算子,获取当月天数。注:SQL 语句获取当月天数方案请自行百度。1.2 实现思路先获取当月第一天日期、下个月第一天日期,然后使用 D[阅读全文:]

SparkSQL编码、加密、解密函数
文档创建者:Roxy      创建时间:06-13 19:14      标签:      编辑:10次    |   浏览:7994次

摘要:1. 概述1.1 版本FineDataLink 版本功能说明--4.1.5.1新增加密函数和解密函数1.2 功能说明「编码函数」、「加密函数」、「签名函数」等常用于进行API加密认证取数时的 Token[阅读全文:]

带参数的SAP函数调用取数
文档创建者:Roxy      创建时间:09-28 16:20      标签:      编辑:7次    |   浏览:3342次

摘要:1. 概述1.1 应用场景用户数据存储在 SAP 中,因此需要对接SAP取数,但是由于数据安全问题或对SAP底层表并不了解,无法直接连接 SAP 的底层数据库取数。因此希望通过RFC接口调用的[阅读全文:]

API输出典型示例
文档创建者:Roxy      创建时间:02-28 12:28      标签:      编辑:16次    |   浏览:11124次

摘要:1. 概述API输出逻辑说明 已经介绍了API输出的基本功能,用户需要将多应用系统的数据通过FDL打通,实现业务系统间的数据交互(交互的形式为API),就可以通过 API 写入满足应用集成场景。本文以一[阅读全文:]

数据比对典型示例
文档创建者:Wendy123456      创建时间:03-17 11:01      标签:      编辑:38次    |   浏览:13708次

摘要:1. 概述数据比对功能说明 文档中介绍了「数据比对」算子的功能,本文以一个简单示例介绍该算子的使用。2. 示例示例demo详情参见:https://demo.finedatalink.com/&nbsp[阅读全文:]

XML解析算子
文档创建者:Roxy      创建时间:09-08 15:18      标签:      编辑:22次    |   浏览:5627次

摘要:[helpvideo]8609[/helpvideo]1. 概述1.1 版本FineDataLink 版本功能变动4.0.9新增「XML解析」算子,可以将输入的 XML 数据解析为行列形式的数据1.2[阅读全文:]

字段拆列
文档创建者:Wendy123456      创建时间:11-13 20:28      标签:      编辑:8次    |   浏览:2743次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.2新增「字段拆列」算子,字段值按照特定规则(分隔符或字符数)拆分,拆分后的结果形成新的多列字段和值4.1.7.3交互优化,选取字段改为[阅读全文:]

分组汇总
文档创建者:Wendy123456      创建时间:11-13 14:23      标签:      编辑:7次    |   浏览:3083次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.2新增「分组汇总」算子,对原始数据根据条件将相同的数据先合并到一组,然后按照分组后的数据进行汇总计算4.1.6.1分组与汇总框支持拖拽[阅读全文:]

SparkSQL语法概述
文档创建者:Wendy123456      创建时间:03-31 16:34      标签:      编辑:29次    |   浏览:18369次

摘要:1. 概述1.1 版本FineDataLink 版本功能变更3.6.2数据转换节点 新增算子「Spark SQL」算子,可实现较灵活的数据转换功能4.0.17「Spark SQL」算子支持使用[阅读全文:]

多个逗号分隔的字段按照分组顺序匹配
文档创建者:Wendy123456      创建时间:08-20 11:30      标签:      编辑:2次    |   浏览:1117次

摘要:1. 概述1.1 应用场景从接口取数后,数据保存格式为:{{主数据},{子数据1,子数据2}{子数据a,子数据b}};其中,子数据中包含多个字段,以逗号分割存储。如下图所示:实际业务场景中,每个子数据相[阅读全文:]

文本函数概述
文档创建者:Roxy      创建时间:06-19 18:05      标签:      编辑:2次    |   浏览:1862次

摘要:1. 使用位置数据开发>数据转换中的新增计算列2. 函数列表函数说明CHAR-返回指定数值的字符根据指定数字返回对应的字符CONCATENATE-字符拼接将数个字符串合并成一个字符串LEN-返回字[阅读全文:]

UUID-返回36位随机字符串
文档创建者:Roxy      创建时间:08-14 15:37      标签:      编辑:1次    |   浏览:664次

摘要:1. 概述注:4.1.11.3 及之后的版本支持该函数。语法UUID()返回通用唯一标识符 (UUID) 字符串。该值以规范的 UUID 36字符串形式返回    返回值类[阅读全文:]

FORMAT-格式转换
文档创建者:Roxy      创建时间:06-16 17:28      标签:      编辑:1次    |   浏览:1731次

摘要: 1. 概述语法FORMAT(数值/日期时间, 格式)FORMAT(数值/日期时间, 格式)返回「数值/日期时间」的指定「格式」的文本。       [阅读全文:]

CONCATENATE-字符拼接
文档创建者:Roxy      创建时间:06-14 14:18      标签:      编辑:4次    |   浏览:1512次

摘要:1. 概述语法CONCATENATE(文本1/日期时间1/数值1, 文本2/日期时间2/数值2, ……)将数个值合并成一个值。如果值是数值,直接转成数值字符串(有小数要保留小数)拼接如果值是T[阅读全文:]

REGEXP_SUBSTR-正则表达式提取字符串中相匹配的内容
文档创建者:Roxy      创建时间:08-13 17:04      标签:      编辑:1次    |   浏览:952次

摘要: 1. 概述注:4.1.11.3 开始支持此函数。语法REGEXP_SUBSTR(字符串, 正则表达式, 起始位置, 输出组次序, 模式)使用正则表达式提取字符串中相匹配的内容  &[阅读全文:]

批量扫描文件同步数据
文档创建者:Wendy123456      创建时间:11-03 10:26      标签:      编辑:6次    |   浏览:1697次

摘要:1. 概述1.1 应用场景某国有企业旗下有 100 多家分公司,子公司财务每月需要向总部提交各种财务预算和决算表,如资产负债表、利润表、现金流量表等数据表。总部财务需要手动对相同类型的财务报表进行数据汇[阅读全文:]

数据关联
文档创建者:Wendy123456      创建时间:03-18 11:01      标签:      编辑:26次    |   浏览:12450次

摘要:1. 概述[helpvideo]8612[/helpvideo]1.1 版本FineDataLink 版本功能变更3.1「数据转换」节点新增算子「数据关联」1.2 应用场景用户两张数据表在不同的数据库中[阅读全文:]

常见日期公式
文档创建者:Roxy      创建时间:06-06 19:56      标签:      编辑:8次    |   浏览:2839次

摘要:1. 概述在对日期型数据进行操作时,经常会遇到要获取当前日期、获取当前时间、获取日期的年月日等等操作。在 FineDataLink 中可以在新增计算列中实现。注:其中的日期字段需要从函数编辑框左侧的字段[阅读全文:]

循环多次读取Windows环境文件同步数据
文档创建者:Wendy123456      创建时间:11-03 10:33      标签:      编辑:7次    |   浏览:2180次

摘要:1. 概述1.1 应用场景用户 Windows 系统中有多个相同格式的 Excel 文件,需要读取所有文件数据并进行 行转列 操作。由于 文件输入 算子批量读取文件时,是将所有文件数[阅读全文:]

数据过滤
文档创建者:Wendy123456      创建时间:02-28 10:27      标签:      编辑:12次    |   浏览:6127次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.19新增「数据过滤」算子,过滤符合条件的数据4.0.28运算符选择「为空」时,可过滤出值为空格的数据1.2 应用场景用户数据存在空值,[阅读全文:]

DB输出(事务)
文档创建者:Roxy      创建时间:01-17 16:01      标签:      编辑:4次    |   浏览:1464次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.5.2-4.1.5.5若「写入方式」设置为直接将数据写入目标表,在设置主键冲突策略中,支持设置「主键相同,覆盖目标表数据」4.1.8.[阅读全文:]

每天获取Excel昨日新增数据导入数据库
文档创建者:Wendy123456      创建时间:04-19 15:53      标签:      编辑:8次    |   浏览:4318次

摘要:1. 概述1.1 预期效果Excel 数据表为源数据表,每天会新增数据,用户希望数据库中的某张表自动新增 Excel 里面昨天新增的数据。1.2 实现思路Excel 数据集作为要输入的数据,使用&nbs[阅读全文:]

获取上月末、上年末等作为参数使用
文档创建者:Roxy      创建时间:04-07 11:11      标签:      编辑:4次    |   浏览:1824次

摘要:1. 概述1.1 应用场景用户想要使用上月末、上年末、上季度末、每个月第一天、最后一天等自定义参数(任务参数)无法直接设置的动态数据作为参数,进行定时任务的开发。1.2 实现思路使用 SparkSQL[阅读全文:]

WEEKDAY-星期数
文档创建者:Roxy      创建时间:06-19 16:54      标签:      编辑:1次    |   浏览:999次

摘要:1. 概述语法WEEKDAY(文本/日期时间)获取日期并返回星期数。返回值为介于0到6之间的某一整数,分别代表星期中的某一天(从星期日到星期六)   参数serial_number表[阅读全文:]

SparkSQL日期函数
文档创建者:Roxy      创建时间:06-16 17:31      标签:      编辑:13次    |   浏览:6358次

摘要:1. 概述本文介绍 SparkSQL 中的日期函数语法。本文同时提供新增计算列公式写法和 SparkSQL 语法写法,用户可自行选择。2. 时间戳推荐使用FineDataLink 新增计算列中[阅读全文:]

DATEDIF-日期差
文档创建者:Roxy      创建时间:06-16 17:01      标签:      编辑:4次    |   浏览:1645次

摘要:1. 概述语法DATEDIF(文本/开始日期, 文本/结束日期, 单位)返回两个指定日期间的天数、月数或年数     参数1文本/开始日期开始日期:代表所指定时间段的初始日[阅读全文:]

读取单Excel多Sheet文件数据
文档创建者:Wendy123456      创建时间:07-11 15:08      标签:      编辑:3次    |   浏览:1828次

摘要:1. 概述1.1 应用场景财务报表、销售数据表、学生成绩表等 Excel 表格中,往往包含多个 Sheet,用户希望使用 FDL 读取单 Excel 多 Sheet 文件数据。1.2 实现思路1)在待读[阅读全文:]

字段设置
文档创建者:Wendy123456      创建时间:04-13 10:53      标签:      编辑:18次    |   浏览:7664次

摘要:1. 概述1.1 版本FineDataLink 版本功能变更3.7「数据转换」节点下新增「字段设置」功能,可实现数据流字段的选择、重命名、数据类型转换操作4.1.5.3支持批量删除和还原字段,详情参见本[阅读全文:]

数据分发
文档创建者:Wendy123456      创建时间:03-15 09:30      标签:      编辑:13次    |   浏览:4819次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.20支持对表中不同字段给予加工处理后再流向不同表1.2 应用场景处理后的数据输出前,用户希望按照不同的过滤条件输出到多张表中,若做多个[阅读全文:]

文件输出算子功能说明
文档创建者:Wendy123456      创建时间:06-25 11:00      标签:      编辑:9次    |   浏览:3718次

摘要:[helpvideo]8618[/helpvideo]1. 概述1.1 版本FineDataLink 版本功能变动4.0.26新增「文件输出」算子,可将数据输出为 CSV 类型的文件4.0.30可将数据[阅读全文:]

行转列
文档创建者:Roxy      创建时间:11-24 11:36      标签:      编辑:15次    |   浏览:11404次

摘要:1. 概述[helpvideo]8615[/helpvideo]1.1 版本说明版本功能变动4.0.15-1.2 应用场景行转列可将一维表转成二维表。一维表也常称为流水线表格。一般有固定的列名,平常输入[阅读全文:]

简道云输入功能说明
文档创建者:Wendy123456      创建时间:07-21 11:40      标签:      编辑:20次    |   浏览:3790次

摘要:1. 概述[helpvideo]8611[/helpvideo]1.1 版本FineDataLink 版本功能变更4.0.2.1数据连接新增「简道云」类型「数据转换」节点新增算子「简道云输入」1.2 应[阅读全文:]

提取简道云表单多值字段并显示为一行
文档创建者:Wendy123456      创建时间:07-31 15:06      标签:      编辑:10次    |   浏览:1779次

摘要:1. 概述1.1 应用场景公司人员信息保存在简道云表单中,在公司内部,有些人可能会同时担任多个职位,如王小明既是总经理又在财务部工作。在王小明出差时,为了方便报销,需要将他所在的多个部门展示出来,方便后[阅读全文:]

数据去重
文档创建者:Roxy      创建时间:06-06 18:41      标签:      编辑:5次    |   浏览:2883次

摘要:1. 概述1.1 预期效果在搭建数据仓库时,可能需要对重复的脏数据进行去重,此时可以使用 SparkSQL 算子中的 GROUP BY 进行处理。例如:有的订单数据不小心触发了两次,一个订单有两个订单数[阅读全文:]

缺失值处理
文档创建者:Roxy      创建时间:06-07 16:08      标签:      编辑:2次    |   浏览:1931次

摘要:1. 概述数仓需要接收来自不同源的大量数据,数据之间可能存在格式、口径、数值上的差异。因此不可避免会出现缺失数据,本文介绍如何对缺失值进行处理。示例数据:internet_v.xls2. 删除缺失值如果[阅读全文:]

字段拆行算子
文档创建者:Wendy123456      创建时间:11-14 11:02      标签:      编辑:6次    |   浏览:2552次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.2新增「字段拆行」算子,字段值按照特定规则(分隔符)拆分,拆分后的结果形成新的一列字段和值4.1.7.3交互优化,选取字段改为「待拆分[阅读全文:]

XML解析示例
文档创建者:Wendy123456      创建时间:05-30 10:39      标签:      编辑:6次    |   浏览:2922次

摘要:1. 概述对于 API、WebService、OData 接口中响应数据返回的 XML 格式数据、来自 XML 文件的数据,用户想要将其解析为行列格式数据,以供后续加工存储。「XML解析」算子[阅读全文:]

JSON解析前过滤出不合法的数据
文档创建者:Wendy123456      创建时间:05-20 11:43      标签:      编辑:2次    |   浏览:1645次

摘要:1. 概述1.1 应用场景大数据量场景下的 json 数据解析,存在问题如下:如果存在几条不合法的 json 格式数据,解析时会导致整个定时任务运行终止。json 解析是数据处理过程,定时任务的脏数据容[阅读全文:]

JSON解析算子典型示例
文档创建者:Wendy123456      创建时间:03-17 11:17      标签:      编辑:25次    |   浏览:10565次

摘要:1. 概述JSON解析算子功能说明 文档中已介绍「JSON 解析」算子的功能,本文以一个简单示例介绍该算子的使用。2. 示例2.1 场景模拟图书数据是以 JSON 格式存储的,保存在接口数据中。http[阅读全文:]

多张Excel表数据关联后再进行加工计算
文档创建者:Wendy123456      创建时间:04-19 10:41      标签:      编辑:12次    |   浏览:3983次

摘要:1. 概述1.1 预期效果用户有两张表,存在不同的数据库中,表数据包含姓名和科目成绩,想要这两张表合并为一张表,且新增一列为科目成绩的总和,将最终数据输出到指定数据库中。1.2 实现思路先将两张成绩表通[阅读全文:]

数据比对后更新目标表时间列
文档创建者:Wendy123456      创建时间:08-04 10:34      标签:      编辑:12次    |   浏览:2731次

摘要:1. 概述1.1 应用场景用户希望来源表的增删改同步到目标表的同时,目标表的 update 字段能记录数据变化时间。「数据比对」算子可以进行增删改标记,通过自动生成 fdl_comp[阅读全文:]

简道云输出示例
文档创建者:Wendy123456      创建时间:06-15 14:10      标签:      编辑:7次    |   浏览:3941次

摘要:1. 概述「简道云输出」算子的功能已在 简道云输出文档 中详细介绍,本文将通过两个示例介绍该算子的使用方法:示例一:简道云表单中不包含部门成员字段。示例二:简道云表单中包含部门成员字[阅读全文:]

简道云输入典型示例
文档创建者:Wendy123456      创建时间:05-17 10:37      标签:      编辑:25次    |   浏览:8081次

摘要:1. 概述简道云输入功能说明 文档中已介绍「简道云输入」算子的功能,本文以一个简单示例介绍该算子的使用。demo 示例详情参见:https://demo.finedatalink.com/&n[阅读全文:]

将包含两个子表单的简道云表单数据落库
文档创建者:Wendy123456      创建时间:10-10 18:30      标签:      编辑:13次    |   浏览:1836次

摘要:1. 概述1.1 应用场景简道云表单中包含两个子表单,其中一个子表单中包含成员单选、部门单选控件。如下图所示:已有数据如下图所示,现希望将该表单的数据落库。1.2 实现思路使用「简道云输入」算子读取表单[阅读全文:]

基于时间增量读取文件
文档创建者:Wendy123456      创建时间:05-26 16:28      标签:      编辑:12次    |   浏览:5682次

摘要:1. 概述1.1 应用场景FTP 服务器上的文件不定期自动更新,每次通过新建文件更新数据。用户希望自动读取这些文件的所有信息并将信息存储到数据库表中。1.2 实现思路文件输入 算子+参数实现。「文件输入[阅读全文:]

API输入-Webservice
文档创建者:Roxy      创建时间:10-18 11:33      标签:      编辑:11次    |   浏览:7111次

摘要:1. 概述1.1 版本说明FineDataLink 版本功能变动4.0.9请求类型为POST时,「请求参数」支持传入XML格式数据对于GET与POST请求,支持输出XML格式数据,支持预览XML响应结果[阅读全文:]

JSON解析问题排查
文档创建者:Wendy123456      创建时间:05-06 16:00      标签:      编辑:2次    |   浏览:1833次

摘要:1. 概述本文为您介绍 JSON解析 相关问题。解析 JSON 数据前,建议查看:解析 JSON 数据 内容。2. 报错及解决方案包含转义字符问题描述:报错:JSON节点获取失败原因分析:用户[阅读全文:]

XML解析问题排查
文档创建者:Wendy123456      创建时间:05-06 15:32      标签:      编辑:1次    |   浏览:1062次

摘要:1. 概述本文为您介绍 XML解析 相关问题。2. XML 数据结构是否标准异常现象:选择节点是会报错:com.fr.dp.exception.FineDPException: xm[阅读全文:]

ISNULL-判断是否为空
文档创建者:Roxy      创建时间:06-19 17:14      标签:      编辑:4次    |   浏览:1772次

摘要:1. 概述语法ISNULL(参数)判断对象中的值是否是NULL。结果为NULL,返回TRUE,否则返回FALSE。注:仅支持单个参数判断。        &nbs[阅读全文:]

文件拆分:只保留最新拆分的文件
文档创建者:Wendy123456      创建时间:03-22 15:22      标签:      编辑:9次    |   浏览:1344次

摘要:1. 概述1.1 应用场景文件输出算子 可将数据按行数拆分至多个文件,但存在以下问题:场景问题每次运行后,被拆分的文件存在重名情况用户多次运行任务,根据数据量不同,被拆分的文件个数可能不同若用[阅读全文:]

备注
文档创建者:Wendy123456      创建时间:06-10 16:12      标签:      编辑:6次    |   浏览:4512次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.4新增「备注说明」节点,可为任务添加备注各节点新增「节点信息」Tab,存放节点名称、节点备注信息4.0.8「备注说明」节点可覆盖其他节[阅读全文:]

NOW-当前时间
文档创建者:Roxy      创建时间:06-16 17:08      标签:      编辑:2次    |   浏览:1341次

摘要:1. 概述语法NOW()获取当前时间         返回值类型日期时间注:若需要获取不带时分秒的当前时间,可使用TODAY-当前日期2. 示例公式结果[阅读全文:]

表连接与联合
文档创建者:Roxy      创建时间:06-12 11:47      标签:      编辑:2次    |   浏览:2330次

摘要:1. 概述进行数据处理时,经常需要将数据表进行连接,本文介绍在 FineDataLink 中的多种连接方式。2. 左连接LEFT JOIN(左连接)和 LEFT OUTER JOIN(左外连接) :返回[阅读全文:]

简道云输入-过滤条件说明
文档创建者:Wendy123456      创建时间:08-28 14:33      标签:      编辑:1次    |   浏览:1340次

摘要:1. 概述简道云输入 算子中,配置筛选条件时,不同类型的字段支持的过滤条件不同,本文进行说明。2. 功能介绍字段类型支持的过滤方式过滤选项flowState等于(默认)进行中、流转完成、手动结束(没有默[阅读全文:]

使用SparkSQL构建日期列并循环取数
文档创建者:Roxy      创建时间:07-25 16:14      标签:      编辑:7次    |   浏览:3184次

摘要:1. 概述1.1 应用场景在 API取数中有时需要日期序列作为 body 值输入(例如 body 中使用 date 值按照日期依次取出当月1号到任务运行当天中每天的数据);此时就需要构建自定义开始时间为[阅读全文:]

函数计算格式
文档创建者:Wendy123456      创建时间:05-11 17:20      标签:      编辑:13次    |   浏览:3289次

摘要:1. 概述在不影响原有字段的情况下,「新增计算列」算子可利用原有字段通过引用或计算获得一个新的字段。本文介绍「新增计算列」算子中公式的组成和正确写法格式。2. 公式组成公式计算由四个内容组成:内容说明函[阅读全文:]

数值函数
文档创建者:Wendy123456      创建时间:05-11 11:16      标签:      编辑:14次    |   浏览:3737次

摘要:1. 概述本文介绍 新增计算列算子 支持的数值函数。2. ABS-绝对值ABS(数值)简介返回数字绝对值公式逻辑ABS(数值)返回指定数字的绝对值,恒为非负数。如果参数中有NULL,则结果为N[阅读全文:]

新增列_分组赋值
文档创建者:Roxy      创建时间:06-12 18:04      标签:      编辑:1次    |   浏览:1543次

摘要:1. 概述新增列_条件赋值 支持根据指定条件进行赋值,形成新的数据列。如果用户只想对已有数据进行分组赋值,不需要设置判断条件,可以直接使用内置公式 SWITCH-分组赋值。2. 操作[阅读全文:]

日期函数概述
文档创建者:Roxy      创建时间:06-19 17:22      标签:      编辑:1次    |   浏览:1819次

摘要:1. 使用位置数据开发>数据转换中的新增计算列2. 函数列表函数说明DATETONUMBER-日期转化为13位时间戳返回自1970年1月1日00:00:00GMT经过的毫秒数。YEAR-返回年份返[阅读全文:]

逻辑函数概述
文档创建者:Roxy      创建时间:06-19 17:21      标签:      编辑:0次    |   浏览:1198次

摘要:1. 使用位置数据开发>数据转换中的新增计算列2. 函数列表函数说明IF-条件判断进行条件判断,如果指定条件的计算结果为 TRUE,IF 函数将返回某个值;如果该条件的计算结果为 FALSE,则返[阅读全文:]

TODAY-当前日期
文档创建者:Roxy      创建时间:06-19 16:38      标签:      编辑:1次    |   浏览:1202次

摘要:1. 概述语法TODAY()是获取当前的日期。返回值类型日期时间2. 注意事项没有参数。若需要获取带时分秒的当前时间,可使用NOW-当前时间3. 示例公式说明TODAY()返回当前日期[阅读全文:]

TIME-时间
文档创建者:Roxy      创建时间:06-19 16:32      标签:      编辑:2次    |   浏览:812次

摘要:1. 概述语法TIME(小时数, 分钟数, 秒数)返回指定的日期和时间,日期会随当天的日期改变介于0:00:00(12:00:00A.M.)与23:59:59(11:59:59P.M.)之间的时间可返回[阅读全文:]

DATE-显示日期
文档创建者:Roxy      创建时间:06-19 16:24      标签:      编辑:1次    |   浏览:1045次

摘要:1. 概述语法DATE(年数值, 月数值, 日数值)返回一个特定日期    参数1年数值代表年,可为一到四位数。     参数2月数值代表月份。若mon[阅读全文:]