"数据开发-定时任务" 分类下的文档该分类下有251篇文档创建该分类下的文档
内置参数
文档创建者:Wendy123456      创建时间:03-17 11:38      标签:      编辑:23次    |   浏览:11080次

摘要:1. 概述1.1 版本说明FineDataLink 版本功能变动1.7增加内置参数:${cyctime}、${workname.opresult}、${jobname.opresult}4.0.31)增[阅读全文:]

全局参数
文档创建者:Wendy123456      创建时间:10-07 09:37      标签:      编辑:14次    |   浏览:4198次

摘要:[helpvideo]8626[/helpvideo]1. 概述1.1 版本FineDataLink 版本功能变动4.0.30可配置全局参数,该参数可在多个定时任务中使用4.1.4交互优化4.1.8.1[阅读全文:]

循环容器逻辑说明
文档创建者:Wendy123456      创建时间:05-31 17:30      标签:      编辑:70次    |   浏览:17874次

摘要:1. 概述[helpvideo]8622[/helpvideo]1.1 版本说明FineDataLink 版本功能变动4.0.3.1新增「循环容器」节点,满足多个节点循环执行的场景4.0.30「循环容器[阅读全文:]

参数赋值节点
文档创建者:Wendy123456      创建时间:03-17 13:45      标签:      编辑:66次    |   浏览:19013次

摘要:1. 概述[helpvideo]8624[/helpvideo]1.1 版本说明FineDataLink 版本功能变动1.7新增一种节点类型:「参数赋值」,可以将取到的数据输出为参数,被下游连线节点使用[阅读全文:]

定时任务调用数据库存储过程
文档创建者:Wendy123456      创建时间:12-12 14:16      标签:      编辑:17次    |   浏览:3689次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.3定时任务中,数据源是 MySQL、Oracle、SQLServer 时,支持调用数据库存储过程4.1.11.2HP Ver[阅读全文:]

节点支持禁用
文档创建者:Wendy123456      创建时间:09-01 14:57      标签:      编辑:5次    |   浏览:1505次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.29节点支持禁用4.1.6.1对于「参数赋值」「条件分支」「虚拟节点」这些不支持单独运行的节点,当其下游节点设置为「禁用」,则该节点不[阅读全文:]

分页取数-分页方式为游标
文档创建者:Wendy123456      创建时间:12-06 15:53      标签:      编辑:13次    |   浏览:2731次

摘要:1. 应用场景用户想要同步钉钉通信录中的用户信息。2. 方案一4.1.3 以及之后的版本支持的方案。FineDataLink 中的数据处理过程,详情参见:https://demo.finedatalin[阅读全文:]

PI数据库API循环取数
文档创建者:Wendy123456      创建时间:08-01 09:26      标签:      编辑:6次    |   浏览:2109次

摘要:1. 概述本文讲述如何从 PI 数据库取数。1.1 什么是PI数据库PI 数据库是由美国 OSIsoft 公司开发的一种适用于实时数据管理的系统。它提供了高性能的数据采集、存储和检索服务,通常用于工业自[阅读全文:]

调用定时任务相关接口说明
文档创建者:Wendy123456      创建时间:09-07 15:43      标签:      编辑:31次    |   浏览:9695次

摘要:1. 概述1.1 版本FDL 与相关插件最新的版本适配要求:注:登录 FDL 工程,点击「管理系统>注册管理」,可在「版本信息」Tab 中查看平台模块版本。平台模块版本开放平台-FineDataL[阅读全文:]

单个实时任务管理
文档创建者:Roxy      创建时间:08-22 18:09      标签:      编辑:8次    |   浏览:1508次

摘要:注:数据开发中实时任务当前属于内测阶段,如需试用或者了解详细信息,请联系技术支持(技术支持联系方式:前往「服务」,选择「在线支持」、电话「400-811-8890」)。1. 概述1.1 版本FineDa[阅读全文:]

简道云输出算子
文档创建者:Roxy      创建时间:02-24 14:36      标签:      编辑:49次    |   浏览:7832次

摘要:[helpvideo]8619[/helpvideo]1. 概述1.1 版本FineDataLink 版本功能变动4.0.20新增简道云输出算子,可将数据输出到简道云中,供简道云使用支持将数据输出到包含[阅读全文:]

字段设置
文档创建者:Wendy123456      创建时间:04-13 10:53      标签:      编辑:20次    |   浏览:7844次

摘要:1. 概述1.1 版本FineDataLink 版本功能变更3.7「数据转换」节点下新增「字段设置」功能,可实现数据流字段的选择、重命名、数据类型转换操作4.1.5.3支持批量删除和还原字段,详情参见本[阅读全文:]

dbf 文件批量自动同步
文档创建者:Roxy      创建时间:03-14 16:35      标签:      编辑:1次    |   浏览:18次

摘要:1. 概述1.1 应用场景希望将二进制的 dbf 文件处理成二维表并定时自动同步,可使用本文方案,为企业降本增效。1.2 实现思路在FDL服务器中按日期新建存放 dbf 文件到文件夹;将业务数据系统中的[阅读全文:]

创建并管理数据源
文档创建者:Roxy      创建时间:08-01 16:28      标签:      编辑:25次    |   浏览:24443次

摘要:[helpvideo]8601[/helpvideo]1. 概述1.1 版本FineDataLink 版本功能变动4.0.21FineDataLink 独立部署版本, 「管理系统>数据连接>[阅读全文:]

读取、创建、写入分区表
文档创建者:Wendy123456      创建时间:12-19 10:55      标签:      编辑:16次    |   浏览:4472次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.3数据写入Hive、星环 TRANSWARP INCEPTOR数据库时,支持创建、写入分区表支持读取 Postgr[阅读全文:]

DB表输出(实时任务)
文档创建者:Roxy      创建时间:08-22 17:47      标签:      编辑:14次    |   浏览:1944次

摘要:注:数据开发中实时任务当前属于内测阶段,如需试用或者了解详细信息,请联系技术支持(技术支持联系方式:前往「服务」,选择「在线支持」、电话「400-811-8890」)。1. 概述1.1 版本FineDa[阅读全文:]

数据处理-按编号和日期汇总顺序拼接数据
文档创建者:Roxy      创建时间:03-11 17:26      标签:      编辑:2次    |   浏览:21次

摘要:1. 概述1.1 应用场景某公司的闸机系统会按照人员编号、通行门禁除、通信时间3个字段,记录每一个人员,经过每一处门禁,具体经过的时间。希望可以将原始通行明细数据,汇总成按:每人每天一条汇总通行详情,且[阅读全文:]

开发模式与生产模式
文档创建者:Roxy      创建时间:04-22 16:33      标签:      编辑:12次    |   浏览:4583次

摘要:[helpvideo]8602[/helpvideo]1. 概述1.1 版本FineDataLink 版本功能说明4.1.7.3-4.1.8.2发布后增加版本比对1.2 应用场景用户需要将定时任务的开发[阅读全文:]

数据同步问题排查
文档创建者:Cecilia12321      创建时间:09-30 15:50      标签:      编辑:23次    |   浏览:10375次

摘要:数据同步配置界面空白问题描述:数据来源界面空白,如下图所示:解决方案:Chrome浏览器版本过低,或者使用的是IE或者其它浏览器。推荐使用最新版本的Chrome浏览器。MySQL 目标端数据同步报错:R[阅读全文:]

TODATE-转换为日期格式
文档创建者:Roxy      创建时间:06-19 16:45      标签:      编辑:3次    |   浏览:3704次

摘要:1. 概述语法TODATE(参数1, [参数2])函数可以将各种日期形式的参数转换为日期类型。其他格式日期/数字/字符串转日期    返回值类型日期时间参数用法说明详情参见[阅读全文:]

FR调用定时任务后轮询是否完成
文档创建者:Wendy123456      创建时间:11-23 09:54      标签:      编辑:8次    |   浏览:2111次

摘要:1. 概述1.1 应用场景FR 通过任务名/任务ID运行定时任务的接口中,可设置延迟参数,在等待设置的 X 秒后可以返回任务运行状态。如下图所示:但某些定时任务运行时间较长且不稳定,当 FDL 执行到接[阅读全文:]

SAP ERP选表查询
文档创建者:Roxy      创建时间:08-28 16:59      标签:      编辑:6次    |   浏览:937次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.10-4.1.12.2支持「选表」和「通用查询」取数4.2.4.1在填写数据过滤条件时,所有条件符号( = > < 等)前[阅读全文:]

数据集输出
文档创建者:Roxy      创建时间:05-21 11:17      标签:      编辑:32次    |   浏览:3467次

摘要:1. 概述1.1 版本FineDataLink 版本FineBI6.1 版本功能变动4.1.8.2-4.1.8.3BI6.1-4.1.9.1-4.1.10.3请参见文档:版本适配说明4.1.10.4 版[阅读全文:]

数据转换问题排查
文档创建者:Roxy      创建时间:06-21 16:01      标签:      编辑:28次    |   浏览:3988次

摘要:数据转换运行日志报错:超出内存限制问题描述:任务运行失败,报错超出内存限制。原因分析:数据开发所占用的内存资源超过工程设置的上限。解决方案:可以根据实际运行任务情况,参考 机器要求 [阅读全文:]

文件输入功能说明
文档创建者:Roxy      创建时间:11-29 18:12      标签:      编辑:50次    |   浏览:12558次

摘要:[helpvideo]8610[/helpvideo]1. 概述1.1 版本说明FineDataLink 版本功能变动4.0.14-4.0.24FineDataLink 服务器本地和 FTP/[阅读全文:]

Python 算子
文档创建者:Wendy123456      创建时间:09-06 11:40      标签:      编辑:46次    |   浏览:9214次

摘要:[helpvideo]8616[/helpvideo]1. 概述1.1 版本FineDataLink 版本功能变动4.0.29「数据转换」节点中新增「Python 算子」4.1.6.2加载文件的默认路径[阅读全文:]

SAP ERP取数概述
文档创建者:Roxy      创建时间:09-28 17:08      标签:      编辑:19次    |   浏览:6430次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.10-4.1.12.2支持「选表」取数算子名称修改为「SAP ERP输入」函数调用配置方式下,导出参数的显示内容,由「...」调整为「[阅读全文:]

上下合并
文档创建者:Wendy123456      创建时间:10-23 09:58      标签:      编辑:9次    |   浏览:3376次

摘要:[helpvideo]8613[/helpvideo]1. 概述1.1 版本FineDataLink 版本功能变更4.1.0新增「上下合并」算子,可对多张表进行上下行合并,输出一张合并表4.1.6.1修[阅读全文:]

SparkSQL字符串函数
文档创建者:Roxy      创建时间:06-13 19:15      标签:      编辑:9次    |   浏览:5555次

摘要:1. 概述本文介绍 SparkSQL 中的字符串函数语法。2. 字符串字符数推荐使用FineDataLink 新增计算列中的LEN-返回字符长度。CHAR_LENGTH(s):返回字符串 s[阅读全文:]

SparkSQL常用语法
文档创建者:Roxy      创建时间:06-13 19:18      标签:      编辑:6次    |   浏览:5964次

摘要:1. 概述本文来介绍 SparkSQL 中的一些常用操作符合语法。2. 常用操作符操作符含义详情=等值比较A=B。如果表达式 A 与表达式 B 相等,则为TRUE;否则为 FALSE在 FineData[阅读全文:]

SparkSQL聚合函数
文档创建者:Roxy      创建时间:06-12 18:20      标签:      编辑:6次    |   浏览:3595次

摘要:1. 概述本文介绍 SparkSQL 中的聚合函数语法。2. COUNT-统计个数示例原表如下图所示:count(*):统计检索出的行的个数,包括 NULL 值的行。 在 SparSQL 中使[阅读全文:]

SparkSQL数学函数
文档创建者:Roxy      创建时间:06-20 14:52      标签:      编辑:6次    |   浏览:3193次

摘要:1. 概述本文介绍 SparkSQL 中的数学函数语法。2. ROUND-四舍五入取整说明:返回某个数字按指定位数舍入后的数字。用法:ROUND(数值, 舍入位数)数值:要进行四舍五入的数字。舍入位数:[阅读全文:]

API取数-获取美团企业版数据
文档创建者:Roxy      创建时间:01-17 12:00      标签:      编辑:6次    |   浏览:141次

摘要:1. 概述1.1 应用场景用户需要将美团企业版的接口数据取出,例如希望将 订单列表查询 中的数据取出,如下图所示:而「美团企业版」的所有接口调用需要对请求参数进行加密,响应参数进行解[阅读全文:]

API输入
文档创建者:Roxy      创建时间:08-10 19:12      标签:      编辑:52次    |   浏览:19893次

摘要:[helpvideo]8607[/helpvideo]1. 概述1.1 版本说明FineDataLink 版本功能变动1.5数据来源中的数据源类型支持 API4.1.3支持分页取数,详情参见:API输入[阅读全文:]

SparkSQL条件函数
文档创建者:Roxy      创建时间:06-12 18:11      标签:      编辑:3次    |   浏览:3488次

摘要:1. 概述本文介绍 SparkSQL 中的条件函数语法。2. IF-条件判断推荐使用FineDataLink 新增计算列中的 IF-条件判断 函数。操作示例详情参见:新增列[阅读全文:]

Spark SQL
文档创建者:Wendy123456      创建时间:03-16 16:10      标签:      编辑:32次    |   浏览:13855次

摘要:[helpvideo]8617[/helpvideo]1. 概述1.1 版本FineDataLink 版本功能变更3.6.2数据转换节点 新增算子「Spark SQL」算子,可实现较灵活的数据转换功能4[阅读全文:]

参数概述
文档创建者:Roxy      创建时间:07-28 19:55      标签:      编辑:28次    |   浏览:8414次

摘要:[helpvideo]8623[/helpvideo]1. 概述为方便数据平台任务各节点相互关联,例如 B 节点的运行结果作为 A 节点的输入值进行后续计算;或者方便用户对数据进行调度配置。FineDa[阅读全文:]

自定义参数(静态参数)
文档创建者:Wendy123456      创建时间:03-17 11:44      标签:      编辑:23次    |   浏览:16484次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动1.7支持自定义参数功能:「参数设置」2.0允许定义值相同的参数,但是会给出提醒,详情参见本文 4.1 节4.0.19支持定义的参数类型,从日[阅读全文:]

循环多次读取Linux环境文件同步数据
文档创建者:Wendy123456      创建时间:04-14 13:58      标签:      编辑:29次    |   浏览:3206次

摘要:1. 概述1.1 应用场景应用场景一:4.0.24 之前版本,用户希望自动化读取相同类型的文件,为企业降本增效。例如:某国有企业旗下有 100 多家分公司,子公司财务每月需要向总部提交各种财务预算和决算[阅读全文:]

Elasticsearch输出
文档创建者:Roxy      创建时间:08-06 12:06      标签:      编辑:6次    |   浏览:1128次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.11.3-1.2 应用场景用户通过从关系型数据库中将待检索的数据写入到 Elasticsearch 里,将 Elasticsearch[阅读全文:]

DB表输出
文档创建者:Wendy123456      创建时间:02-14 14:18      标签:      编辑:29次    |   浏览:13119次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动3.1-3.7「DB表输出」算子的「数据去向」Tab 中若选择「自动建表」,「字段映射」Tab 下可删除表字段、修改表字段展示顺序、修改表字段[阅读全文:]

数据比对功能说明
文档创建者:Wendy123456      创建时间:07-20 15:24      标签:      编辑:22次    |   浏览:8037次

摘要:1. 概述[helpvideo]8614[/helpvideo]1.1 版本FineDataLink 版本功能变动3.3「数据转换」节点新增算子「比对删除」,可将来源表中删除数据的操作同步到目标表4.0[阅读全文:]

解析XML文件数据
文档创建者:Roxy      创建时间:08-08 15:52      标签:      编辑:6次    |   浏览:2231次

摘要:1. 概述1.1 应用场景用户希望将离线 XML 文件内的数据解析成二维表并落库。1.2 实现思路将 XML 文件放置在 FTP 环境或者 FineDataLink 工程的 webroot 下;然后使用[阅读全文:]

定时任务问题排查
文档创建者:FineDataLink      创建时间:05-24 14:21      标签:      编辑:66次    |   浏览:5936次

摘要:新建定时任务,前端报错:任务不存在,无法获取文件问题描述:新建定时任务,前端报错“任务不存在,无法获取文件”。解决方案:linux 环境缺乏中文语言包。在新建任务时,生成的dp文件为???.dp,导致任[阅读全文:]

数据上云且触发智能助手
文档创建者:Wendy123456      创建时间:12-23 19:53      标签:      编辑:4次    |   浏览:371次

摘要:1. 概述1.1 应用场景设备异常处理场景中,多为现场工作人员或 IOT 平台人员发现设备异常,再人工通知维修部进行工单分配,多环节均效率低下。FineDataLink 可基于IOT→FineDataL[阅读全文:]

不带参数的SAP函数调用取数
文档创建者:Roxy      创建时间:09-27 11:18      标签:      编辑:14次    |   浏览:3238次

摘要:1. 概述1.1 应用场景用户数据存储在 SAP 中,因此需要对接 SAP 取数,但是由于数据安全问题或对 SAP 底层表并不了解,无法直接连接 SAP 的底层数据库取数。因此希望调用 SAP 系统内已[阅读全文:]

MongoDB输出
文档创建者:Wendy123456      创建时间:03-27 11:36      标签:      编辑:6次    |   浏览:1921次

摘要:1. 概述1.1 版本FineDataLink 版本功能变更4.1.6.4定时任务支持写入 MongoDB1.2 应用场景有些用户业务系统的数据库是 MongoDB,需要通过定时任务[阅读全文:]

SQL脚本
文档创建者:Wendy123456      创建时间:03-17 11:26      标签:      编辑:38次    |   浏览:13166次

摘要:1. 概述[helpvideo]8620[/helpvideo]1.1 版本FineDataLink 版本功能变动1.0-4.1.3脚本配置Tab下,数据源是 MySQL、Oracle、SQL[阅读全文:]

API取数-获取企业微信人员信息
文档创建者:Roxy      创建时间:11-22 22:50      标签:      编辑:13次    |   浏览:14926次

摘要:本文档示例由广州医软智能科技有限公司提供,在此特别鸣谢。注:该示例为从企业自建应用中使用接口取数的步骤,如果只想要使用通讯录同步获取 userid 和 department 数据,可以参考:API取数-[阅读全文:]

独立部署下定时任务结果输出至FineBI
文档创建者:Roxy      创建时间:08-10 15:26      标签:      编辑:10次    |   浏览:4396次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.27独立部署时支持将 FineDataLink 处理好的数据输出至 FineBI交互界面优化4.1.3无需进行文件配置通过数据连接,支[阅读全文:]

数据同步-写入方式
文档创建者:Roxy      创建时间:12-28 15:07      标签:      编辑:18次    |   浏览:7125次

摘要:1. 概述1.1 版本FineDataLink版本功能说明--4.0.181)移除了「比对字段」2)写入方式「直接将数据写入目标表」,更新为「追加写入数据」4.0.28调整「写入方式」和「字段映射」的顺[阅读全文:]

文件输入算子读取单个文件
文档创建者:Wendy123456      创建时间:05-25 11:24      标签:      编辑:8次    |   浏览:3310次

摘要:1. 概述文件输入 文档讲述了「文件输入」算子的基本功能,「文件输入」算子支持从 FineDataLink 服务器本地和 FTP/SFTP 服务器上读取 Excel 和 CSV 文件[阅读全文:]

消息通知
文档创建者:Wendy123456      创建时间:03-17 16:12      标签:      编辑:43次    |   浏览:14104次

摘要:1. 概述[helpvideo]8629[/helpvideo]1.1 版本FineDataLink 版本功能变动3.6.1新增节点「消息通知」,可将任务调度结果以企业微信群机器人的形式通知给指定用户4[阅读全文:]

JSON生成
文档创建者:Roxy      创建时间:02-15 14:15      标签:      编辑:11次    |   浏览:6386次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.19-4.1.7.2界面优化4.1.14.1支持设置分组字段,可按照分组字段合并JSON字段1.2 应用场景当用户需要使用 API 输[阅读全文:]

定时任务DDL同步
文档创建者:Roxy      创建时间:01-23 17:41      标签:      编辑:19次    |   浏览:3783次

摘要:1. 概述1.1 版本FineDataLink版本功能变动4.1.5.4-4.1.8.2DB表输出支持来源字段结构变化后提示更新字段映射,详情参见本文 2.2 节4.1.9.3支持用户自定义字段类型映射[阅读全文:]

文件传输功能说明
文档创建者:Roxy      创建时间:02-23 11:51      标签:      编辑:17次    |   浏览:4030次

摘要:[helpvideo]8628[/helpvideo]1. 概述1.1 版本FineDataLink 版本功能说明4.1.5.5-1.2 应用场景简道云/API附件移动:用户想要将简道云/API接口中的[阅读全文:]

解析并关联多个JSON数组字段(4.1.6.2及其后版本)
文档创建者:Roxy      创建时间:12-16 17:11      标签:      编辑:1次    |   浏览:327次

摘要:注:本文方案适用于 4.1.6.2 之后版本。1. 概述1.1 应用场景用户的 JSON 数据中包含多个数组字段,如下图所示:希望解析数组字段,且解析后的字段一一对应。如下图所示:1.2 实现思路使用[阅读全文:]

解析并关联多个JSON数组字段(4.1.6.2之前版本)
文档创建者:Wendy123456      创建时间:08-25 11:16      标签:      编辑:12次    |   浏览:3275次

摘要:注:本文方案适用于 4.1.6.2 之前版本。1. 概述1.1 应用场景用户的 JSON 数据中包含多个数组字段,如下图所示:希望解析数组字段,且解析后的字段一一对应。如下图所示:1.2 实现思路「JS[阅读全文:]

读取飞书多Sheet表格数据
文档创建者:Wendy123456      创建时间:12-02 20:06      标签:      编辑:4次    |   浏览:598次

摘要:1. 概述1.1 应用场景公司通过飞书多维表格设计了一套数据填报应用,但数据均在云上,需要通过API接口进行下载数据,并关联目前的应用数据等。1.2 接口说明接口文档详情参见:读取多个范围1.3 实现思[阅读全文:]

使用偏移量从XML接口取数
文档创建者:Wendy123456      创建时间:10-14 10:45      标签:      编辑:6次    |   浏览:470次

摘要:1. 概述1.1 应用场景用户有一接口返回 XML 格式数据(数据量较多),希望从该接口中取出所有数据。存在问题如下:需要循环取数,但接口没有分页结束标识。API输入-分页取数 功能目前不支持[阅读全文:]

分页取数-按页数取数
文档创建者:Roxy      创建时间:11-24 17:19      标签:      编辑:15次    |   浏览:7814次

摘要:1. 应用场景某企业现在需要将某业务工单数据全部取出以供业务分析使用。由于数据量比较大,不可能一次性取全量数据,因此需要使用参数。接口文档中 pageIndex 表示数据页数;pag[阅读全文:]

分页取数-计算总页数并按页取数
文档创建者:Roxy      创建时间:10-11 15:20      标签:      编辑:8次    |   浏览:2987次

摘要:1. 概述1.1 应用场景某企业现在需要将某业务数据全部取出以供业务分析使用。由于数据量比较大,不可能一次性取全量数据,因此需要使用参数。接口文档中 pageNum 表示数据页数;p[阅读全文:]

数据同步-基于标识字段,新增/修改/删除数据
文档创建者:Wendy123456      创建时间:08-15 13:46      标签:      编辑:16次    |   浏览:5425次

摘要:1. 概述1.1 应用场景用户希望将筛选出的数据(没有标识字段)写入目标表,且写入的数据只做新增/更新/删除操作。用户来源表数据已经有了标识字段和标识值,需要对目标表数据进行新增/更新/删除操作。1.2[阅读全文:]

MongoDB输入
文档创建者:Wendy123456      创建时间:06-27 18:54      标签:      编辑:18次    |   浏览:6605次

摘要:1. 概述1.1 版本FineDataLink 版本功能变更4.0.4.2数据连接新增 MongoDB 类型「数据转换」节点新增算子「MongoDB输入」,可实现查询MongoDB指定集合数据的功能1.[阅读全文:]

数据同步与数据转换的区别
文档创建者:Roxy      创建时间:10-12 19:47      标签:      编辑:16次    |   浏览:16046次

摘要:1. 概述[helpvideo]8605[/helpvideo]FineDataLink 提供了包含数据开发、任务运维等功能,满足用户对数据进行同步、处理、清洗等一系列的需求。本文为你说明「数据同步」和[阅读全文:]

简道云表单调用定时任务接口示例
文档创建者:Wendy123456      创建时间:12-02 18:53      标签:      编辑:2次    |   浏览:680次

摘要:1. 概述1.1 应用场景用户简道云流程流转中,下游表单需要使用上游表单经过 FDL处理后的数据。用户希望 FDL 可以代替简道云的数据工厂进行数据处理。1.2 实现思路简道云表单中可调用执行定时任务的[阅读全文:]

CDC输入
文档创建者:Roxy      创建时间:08-22 17:35      标签:      编辑:5次    |   浏览:2398次

摘要:注:数据开发中实时任务当前属于内测阶段,如需试用或者了解详细信息,请联系技术支持(技术支持联系方式:前往「服务」,选择「在线支持」、电话「400-811-8890」)。1. 概述1.1 版本FineDa[阅读全文:]

全局参数-静态参数
文档创建者:Roxy      创建时间:05-11 16:33      标签:      编辑:4次    |   浏览:1724次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.30可配置全局参数,该参数可在多个定时任务中使用4.1.4交互优化1.2 应用场景当多个定时任务需要使用相同的自定义参数(任务参数)时[阅读全文:]

批量导入导出定时任务、调度计划
文档创建者:Wendy123456      创建时间:11-27 19:45      标签:      编辑:2次    |   浏览:549次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.2.0.3支持批量导入/导出定时任务、调度计划1.2 应用场景1)资源复用场景将标准化场景任务进行资源打包,提供给 IT 人员后,IT 人[阅读全文:]

Elasticsearch输入
文档创建者:Roxy      创建时间:11-12 15:53      标签:      编辑:2次    |   浏览:715次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.2.0.2-1.2 应用场景用户的业务数据库是 Elasticsearch 数据库,需要定时读取 Elasticsearch 数[阅读全文:]

数据转换概述
文档创建者:Wendy123456      创建时间:03-17 10:49      标签:      编辑:56次    |   浏览:23392次

摘要:1. 概述[helpvideo]8606[/helpvideo]1.1 版本说明FineDataLink 版本功能变动3.1新增节点「数据转换」4.1.2新增「字段拆列」「字段拆行」「分组汇总」算子4.[阅读全文:]

SAP RFC:日期+偏移量双重循环取数
文档创建者:Wendy123456      创建时间:11-14 15:51      标签:      编辑:4次    |   浏览:505次

摘要:1. 概述1.1 应用场景SAP RFC 一次性取数过大时,驱动可能会崩溃,FDL 也可能会宕机。部分 RFC 函数提供了 ROWCOUNT、ROWSKIPS 和 date 参数,分[阅读全文:]

数据同步概述
文档创建者:Wendy123456      创建时间:03-17 10:24      标签:      编辑:84次    |   浏览:28409次

摘要:1. 概述[helpvideo]8604[/helpvideo]1.1 应用场景用户同步数据时,在以下场景中,可使用「数据同步」节点实现:数据无需进行复杂的数据处理,希望快速完成数据表的同步。目标库计算[阅读全文:]

增删改数据同步至简道云表单(清空目标表,再写入数据)
文档创建者:Wendy123456      创建时间:03-25 11:33      标签:      编辑:9次    |   浏览:1873次

摘要:1. 概述1.1 应用场景用户在以下场景时,希望能先清空简道云表单再写入数据:简道云表单数据发生全面更新,需要将数据库增删改数据写入简道云,同时不需要标记增删改历史情况。简道云更新数据量比较小,且有更新[阅读全文:]

多个简道云子表单增删改输出
文档创建者:Roxy      创建时间:04-02 17:05      标签:      编辑:10次    |   浏览:2165次

摘要:1. 概述1.1 应用场景用户想要将数据库系统数据输出到简道云多个子表单中,实现子表单数据的新增、更新和删除。注:若数据量不大或者简道云表单数据插入没有记录时间的固定字段,推荐使用增删改数据同步至简道云[阅读全文:]

Shell脚本
文档创建者:Roxy      创建时间:09-01 18:52      标签:      编辑:45次    |   浏览:11404次

摘要:1. 概述[helpvideo]8627[/helpvideo]1.1 版本说明FineDataLink 版本功能变动4.0.8-4.1.0「脚本参数」下拉框中显示已配置参数1.2 应用场景用户希望在[阅读全文:]

新增计算列功能说明
文档创建者:Wendy123456      创建时间:05-09 17:25      标签:      编辑:15次    |   浏览:6492次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.23支持对常量、参数和其他字段进行公式计算或逻辑映射,将结果放到新的一列,参与后续运算或进行输出4.1.8.3在公式编辑可选的参数中,[阅读全文:]

连线执行判断
文档创建者:Wendy123456      创建时间:05-25 15:10      标签:      编辑:19次    |   浏览:4857次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.31)在定时任务编辑界面中,右键点击节点连线,提供「无条件执行」、「成功时执行」、「报错时执行」的节点连线配置2)在定时任务编辑界面中[阅读全文:]

全局参数-赋值参数
文档创建者:Roxy      创建时间:05-11 14:58      标签:      编辑:11次    |   浏览:2467次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.8.1新增动态赋值参数设置功能4.1.13.2配置方式为「选表」时,支持选字段4.1.14.1全局参数调试值的长度,最大为 20001[阅读全文:]

FineDataLink服务器时间和数据库时间不一致
文档创建者:Roxy      创建时间:08-22 15:55      标签:      编辑:7次    |   浏览:2179次

摘要:1. 概述1.1 应用场景部署工程时,可能会使用多个不同的服务器,部署多个工程节点、集群组件、外接配置库等。用户必须确保这些服务器的时区一致,否则可能导致部署失败、启动失败、取数异常等。问题一:用户读写[阅读全文:]

定时任务能力说明
文档创建者:Wendy123456      创建时间:07-25 11:42      标签:      编辑:14次    |   浏览:4355次

摘要:1. 概述「数据开发>定时任务」模块支持在可视化界面使用各个节点和算子进行数据的抽取、转换和装载,并可以通过定时调度功能自动运行定时任务,帮助您轻松构建离线数仓,保证数据生产的高效稳定。本文为您说[阅读全文:]

实时任务概述
文档创建者:Roxy      创建时间:06-12 16:54      标签:      编辑:10次    |   浏览:5659次

摘要:注:数据开发中实时任务当前属于内测阶段,如需试用或者了解详细信息,请联系技术支持(技术支持联系方式:前往「服务」,选择「在线支持」、电话「400-811-8890」)。1. 概述1.1 版本FineDa[阅读全文:]

定时任务界面介绍
文档创建者:Wendy123456      创建时间:04-18 10:04      标签:      编辑:29次    |   浏览:4136次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动1.9-4.1.4任务工具栏中的「保存并运行」按钮,修改为「运行」按钮「任务控制」中的调度配置Tab,单独独立出来,为「调度计划」4.1.5.[阅读全文:]

解析多层嵌套JSON并实现1:n关系
文档创建者:Wendy123456      创建时间:10-11 16:02      标签:      编辑:5次    |   浏览:1144次

摘要:1. 概述1.1 应用场景用户的 JSON 数据结构是多层数组嵌套,如下图所示:现需要解析上层数组元素和下层数组元素,实现 1:n 的关系。例如:希望 titles 数组中的字段,能与 items 数组[阅读全文:]

Python脚本
文档创建者:Roxy      创建时间:08-01 14:29      标签:      编辑:13次    |   浏览:8786次

摘要:[helpvideo]8621[/helpvideo]1. 概述1.1 版本FineDataLink 版本功能变动4.0.28新增「Python脚本」节点4.1.0「脚本参数」下拉框中显示已配置参数4.[阅读全文:]

列转行
文档创建者:Wendy123456      创建时间:03-17 10:55      标签:      编辑:22次    |   浏览:9726次

摘要:1. 概述[helpvideo]8615[/helpvideo]1.1 版本FineDataLink 版本功能变动3.5「数据转换」节点新增算子「行列转换」,目前支持列转行功能,行转列功能敬请期待4.0[阅读全文:]

JSON解析算子功能说明
文档创建者:Wendy123456      创建时间:07-31 09:21      标签:      编辑:25次    |   浏览:6648次

摘要:[helpvideo]8608[/helpvideo]1. 概述1.1 版本FineDataLink 版本功能变动3.5.1「数据转换」节点新增算子「JSON 解析」;支持将 JSON 结构的[阅读全文:]

Pulsar输入
文档创建者:Roxy      创建时间:08-22 14:54      标签:      编辑:6次    |   浏览:1223次

摘要:注:数据开发中实时任务当前属于内测阶段,如需试用或者了解详细信息,请联系技术支持(技术支持联系方式:前往「服务」,选择「在线支持」、电话「400-811-8890」)。1. 概述1.1 版本FineDa[阅读全文:]

Kafka输入
文档创建者:Roxy      创建时间:08-22 11:54      标签:      编辑:5次    |   浏览:3356次

摘要:注:数据开发中实时任务当前属于内测阶段,如需试用或者了解详细信息,请联系技术支持(技术支持联系方式:前往「服务」,选择「在线支持」、电话「400-811-8890」)。1. 概述1.1 版本FineDa[阅读全文:]

数据转换FAQ
文档创建者:Wendy123456      创建时间:05-08 14:25      标签:      编辑:13次    |   浏览:1915次

摘要:1. 概述本文档收集数据转换节点的常见问题,并给出答案。2. 数据转换2.1 简道云相关分类常见问题解决方案简道云数据连接FDL怎么获取简道云的数据源可参考 简道云输入典型示例 获取[阅读全文:]

定时任务FAQ
文档创建者:Wendy123456      创建时间:09-11 16:58      标签:      编辑:32次    |   浏览:4879次

摘要:1. 概述本文档收集数据开发模块的常见问题,并给出答案。2. 数据开发模块功能咨询分类常见问题解决方案数据同步VS数据转换「数据转换」节点能实现数据同步功能,那「数据同步」节点单独拿出来的意义是什么详情[阅读全文:]

参数在FDL中的典型应用场景
文档创建者:Wendy123456      创建时间:05-27 09:36      标签:      编辑:8次    |   浏览:2254次

摘要:1. 概述本文介绍参数在数据开发中的典型应用场景。如何配置并使用参数请参见:如何配置并使用参数2. 数据开发2.1 增量数据同步定时任务每次执行时,可只同步指定时间范围内、或指定主键范围内的数据到目标表[阅读全文:]

Kafka输出
文档创建者:Roxy      创建时间:08-22 16:58      标签:      编辑:1次    |   浏览:2419次

摘要:注:数据开发中实时任务当前属于内测阶段,如需试用或者了解详细信息,请联系技术支持(技术支持联系方式:前往「服务」,选择「在线支持」、电话「400-811-8890」)。1. 概述1.1 版本FineDa[阅读全文:]

新增计算列获取当月天数
文档创建者:Wendy123456      创建时间:09-20 11:13      标签:      编辑:4次    |   浏览:562次

摘要:1. 概述1.1 应用场景用户想使用 新增计算列 算子,获取当月天数。注:SQL 语句获取当月天数方案请自行百度。1.2 实现思路先获取当月第一天日期、下个月第一天日期,然后使用 D[阅读全文:]

循环容器循环次数无限制插件
文档创建者:Roxy      创建时间:07-10 11:52      标签:      编辑:5次    |   浏览:1905次

摘要:1. 概述1.1 版本FineDataLink版本4.1.10.21.2 应用场景用户希望定时任务中的循环容器的循环次数上限无限制次数(当前默认 10000次);希望单个参数输出值的个数没有限制。便于用[阅读全文:]

ETL计算引擎
文档创建者:Roxy      创建时间:09-09 13:55      标签:      编辑:2次    |   浏览:4273次

摘要:1. ETL计算引擎定义ETL(Extract, Transform, Load)计算引擎是用于执行 ETL 过程中数据转换阶段的关键组件之一。它负责处理从不同数据源抽取的数据,并根据预定义的转换规则进[阅读全文:]

数据同步-API
文档创建者:Wendy123456      创建时间:03-17 10:40      标签:      编辑:70次    |   浏览:25665次

摘要:1. 概述1.1 版本「数据同步-API」功能包含的设置项与 API 输入算子 相同,功能变动请参见:API输入 文档的 1.1 节内容。1.2 应用场景出于安全考虑,有时不允许直接访问数据库[阅读全文:]

SparkSQL编码、加密、解密函数
文档创建者:Roxy      创建时间:06-13 19:14      标签:      编辑:10次    |   浏览:8129次

摘要:1. 概述1.1 版本FineDataLink 版本功能说明--4.1.5.1新增加密函数和解密函数1.2 功能说明「编码函数」、「加密函数」、「签名函数」等常用于进行API加密认证取数时的 Token[阅读全文:]

使用文件传输节点传输图片/视频
文档创建者:Roxy      创建时间:09-13 10:25      标签:      编辑:2次    |   浏览:771次

摘要:1. 概述1.1 应用场景用户想要将 FTP/SFTP服务器/本地FineDataLink 工程中的图片、视频输出至指定的服务器中。1.2 实现思路使用「文件传输」节点,设置「文件来源」为FT[阅读全文:]

参数输出
文档创建者:Roxy      创建时间:11-15 10:55      标签:      编辑:20次    |   浏览:7430次

摘要:1. 概述[helpvideo]8625[/helpvideo]1.1 版本FineDataLink 版本功能变动4.0.13-4.1.0优化「参数输出」设置界面将「分隔符」单选按钮组改为「闭包符」开关[阅读全文:]