摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.3数据写入Hive、星环 TRANSWARP INCEPTOR数据库时,支持创建、写入分区表4.2.0.2支持读取 [阅读全文:]
摘要:提示:本文详细说明 PostgreSQL 数据源在 FDL 中的使用特性,包括使用限制以及在不同功能使用中的特殊情况,帮助用户更好地理解和应用数据源。数据开发-定[阅读全文:]
摘要:提示:本文详细说明 Greenplum 数据源在 FDL 中的使用特性,包括使用限制以及在不同功能使用中的特殊情况,帮助用户更好地理解和应用数据源。通用限制无论是[阅读全文:]
摘要:提示:本文详细说明 GaussDB 200 数据源在 FDL 中的使用特性,包括使用限制以及在不同功能使用中的特殊情况,帮助用户更好地理解和应用数据源。数据开发-[阅读全文:]
摘要:提示: 4.0.29 之前版本,为保证写入性能,建议使用 Hadoop Hive (HDFS) 数据连接。提示:4.0.29 及之后版本,若只是读取 [阅读全文:]
摘要:提示:本文详细说明星环 inceptor 数据源在 FDL 中的使用特性,包括使用限制以及在不同功能使用中的特殊情况,帮助用户更好地理解和应用数据源。使用限制由于 Hive[阅读全文:]
摘要:1. 概述1.1 应用场景公司之前手动在 Excel 表中录入公司电脑借用信息,现在使用简道云表单进行录入。为了实现信息的同步,需要将之前在 Excel 表中录入的信息导入到简道云表单中。Excel 表[阅读全文:]
摘要:2025年4.2.5更新日志详情:4.2.5更新日志4.2.5.21)JSON 生成优化。4.2.5.1发布日期:2025-04-031)事件调度优化。2)支持 Snowflake 数据源。3)支持PI[阅读全文:]
摘要:4.2.5.2JSON生成优化优化前:JSON 配置表内,嵌套不能超过三层;在生成 JSON 时需要重复使用字段,单个字段只允许在JSON生成算子内被选择一次;在向 API 传输 JSON 时需要使用固[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.19-4.1.7.2界面优化4.1.14.1支持设置分组字段,可按照分组字段合并JSON字段4.2.5.2支持 JSON 配[阅读全文:]
摘要:1. 概述1.1 应用场景FineDataLink 内置的数据库为 HSQL 数据库。HSQL 数据库不能多线程访问,集群环境、数据量较大可能会导致 HSQL 数[阅读全文:]
摘要:1. 概述1.1 功能简介 FineDataLink 系统配置外接数据库后,遇到集群环境或数据量较大情况时,可保证系统的稳定性。用户可在「初始化时」配置外接数据库或在「管理系统」配置[阅读全文:]
摘要:[helpvideo]8592[/helpvideo]1. 概述1.1 应用场景企业在构建数仓和中间库时,由于业务数据量级较大,如果使用 数据同步 批量定时同步数据很难做到高性能的增[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动2.0-4.1.7.3记录读写过程日志\异常和错误日志使用过程中产生的过程日志,支持将运行记录导出为文件,以供查看和使用,详情参见本文 3.[阅读全文:]
摘要:1. 概述本文讲述如何使用 FDL 发布一个 API ,且发布后的 API 如何在 FDL 工程中调用。注:发布的 API 若想被调用,必须绑定应用;应用的认证方式有三种:无认证、AppCode、摘要签[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.6.1支持为「库表管理」功能分配授权权限1.2 应用场景超级管理员可以给予某个用户「库表管理」的授权权限,该用户将成为一个次级管理员。[阅读全文:]
摘要:1. 概述1.1 应用场景管理员希望能为普通用户分配库表管理。本文将介绍管理员如何给用户分配库表管理的管理权限,使得用户可以「查看和编辑」指定数据连接下的数据库。1.2 前提条件已经注册了相关功能,详情[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink版本Nginx 版本4.0.27 及以上1.21 及以上版本,优先使用最新版本1.2 应用场景Nginx是一款高性能、高可靠性[阅读全文:]
摘要:1. 版本FineDataLink 版本功能变动1.5数据输入适配 API4.2.0.3针对 OceanBase(Oracle模式)数据源:定时任务支持读取和写入管道任务支持写入库表[阅读全文:]
摘要:1. 概述1.1 版本 FineDataLink 版本功能变动4.2.5.1数据开发-定时任务中支持读取 PI 数据库1.2 功能简介数据开发-定时任务中支持读取 PI 数[阅读全文:]
摘要:1. 概述1.1 版本 FineDataLink 版本功能变动4.2.5.1-1.2 应用场景Snowflake 是海外 top 级的云数仓,许多外企的母公司已经选型了 Snowflake,在[阅读全文:]
摘要:这里可以查看所有历史产品月报哦,点击封面即可打开对应月报啦~2025-032024-112024-092024-082024-072024-062024-052024-042024-032024-022[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.27支持批量设置任务调度计划4.0.30「调度计划」中新增「事件调度」,可为多个定时任务配置统一事件调度「调度计划」中定时调度 Tab[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能说明4.0.30支持设置定时任务的调度依赖4.1.1依赖任务下拉框中,屏蔽成环任务4.1.4添加事件调度时,增加一个示例,帮助用户理解功能4.1.[阅读全文:]
摘要:1. 操作系统要求注:FineDataLink 支持了一些国产化的操作系统、中间件、芯片等,国产化环境准备请参见:FineDataLink支持的国产化环境类别型号Linux操作系统CentOS6&nbs[阅读全文:]
摘要:兼容说明升级步骤详情参见:4.2.x版本间升级说明若升级前版本为 4.1 的版本,则推荐先升级至 4.2.2.3 版本,再升级至 4.2.4 版本。升级前需要备份 FineDB和历史 JAR 包。由于[阅读全文:]
摘要:本文仅用于指导非运维平台部署的FineDataLink4.1.x工程升级。运维平台部署的FineDataLink工程,请通过运维平台进行升级,详情请参见:外网升级运维项目、内网升级运维项目1. 概述为满[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.1支持设置业务日志的级别支持备份、还原、清理业务日志4.1.7.3定时任务运行记录可直接使用 3.4 节功能进行手动/自动清理4.2.[阅读全文:]
摘要:提示:本文详细说明 StarRocks 数据源在 FDL 中的使用特性,包括使用限制以及在不同功能使用中的特殊情况,帮助用户更好地理解和应用数据源。通用限制列名如果包含中文[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.24定时任务输入输出支持 StarRocks管道任务数据输出支持 StarRocks4.1.2数据服务支持 StarRock[阅读全文:]
摘要:提示:本文详细说明 Doris 数据源在 FDL 中的使用特性,包括使用限制以及在不同功能使用中的特殊情况,帮助用户更好地理解和应用数据源。通用限制1)FineDataLi[阅读全文:]
摘要:1. 概述1.1 版本 FineDataLink 版本功能变更4.0.23定时任务输入输出支持 Doris管道任务数据输出支持 Doris4.2.3.1数据开发-定时任务中[阅读全文:]
摘要:产品新功能实时任务新增实时采集任务为了避免重复解析数据库日志导致数据库压力过大,新增实时采集任务,可以对数据库日志解析进行管理,存储日志解析产生的变更数据,实时任务、管道任务能够消费实时数据共享中心的数[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动--4.1.2支持多租户架构作为管道任务数据来源端4.2.2.3数据管道源端适配 Oracle 21c1.2 功能简介CDC(Change D[阅读全文:]
摘要:1. 概述1.1 应用场景来源表字段值都有同样的数据问题,例如需要批量替换指定的数据后写入目标表。1.2 解决思路使用全局清洗规则,将值匹配后使用公式统一修改。2. 操作步骤2.1 设置全局清洗规则在数[阅读全文:]
摘要:1. 概述[helpvideo]8624[/helpvideo]1.1 版本说明FineDataLink 版本功能变动1.7新增一种节点类型:「参数赋值」,可以将取到的数据输出为参数,被下游连线节点使用[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.11.4-4.1.13.2增加MQTT输入、IBM MQ输入数据源心跳检测4.1.13.4增加转换类算子的运行日志4.2.4.3优化日[阅读全文:]
摘要:提示:配置管道任务和实时任务之前均需要进行缓存配置,详情参见:缓存配置1. 概述1.1 版本FineDataLink版本功能变动4.2.4.3-1.2 应用场景当多个实时任务、管道任务对同一个数据库的不[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.264.0.26 版本之前,「结果通知」需要「开启调度」才能设置;4.0.26 版本及之后,「结果通知」可以单独开启4.0.28「结果[阅读全文:]
摘要:1. 概述1.1 版本 FineDataLink 版本功能变动4.2.1.2数据开发-定时任务中支持读取 InfluxDB 数据库1.2 功能简介数据开发-定时任务中支持读取&nbs[阅读全文:]
摘要:1. 概述1.1 版本版本功能变动4.1.11.4-1.2 应用场景为了便于用户通过配置 Pulsar 消费者的方式,实时从 Pulsar 中取数。FineDataLink 支持配置 Puls[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.15-4.1.6.3数据服务支持 KingbaseES1.2 应用场景FineDataLink 支持连接 Kingbase&[阅读全文:]
摘要:[helpvideo]8631[/helpvideo]1. 概述FineDataLink 支持使用 Kafka 作为数据同步的中间件,暂存来源数据库中的数据,便于目标数据库写入数据,实现实时数[阅读全文:]
摘要:1. 概述用户在使用 Shell 脚本调用外部任务时,需要了解 FineDataLink 的调用任务是否执行成功。同时本文给出推荐的 shell 脚本书写方式。2. 判断Shell脚本任务执行成功Fin[阅读全文:]
摘要:1. 概述语法WEEK(文本/日期时间/数值, "F1"/"F7")返回一个代表一年中的第几周的数字 &nb[阅读全文:]
摘要:1. 概述1.1 认证方式简介1)Kerberos 认证是 Hadoop 生态的一种通用的认证方式。2)配置 Kerberos 认证的方式有两种:直接使用数据连接配置界面中的 Kerberos 认证:主[阅读全文:]
摘要:1. 概述FineDataLink 支持使用 Kafka 作为数据同步的中间件,暂存来源数据库中的数据,便于目标数据库写入数据,实现实时数据同步。本文介绍 Kafka KR[阅读全文:]
摘要:注:数据开发中实时任务当前属于内测阶段,如需试用或者了解详细信息,请联系技术支持(技术支持联系方式:前往「服务」,选择「在线支持」、电话「400-811-8890」)。1. 概述1.1 版本FineDa[阅读全文:]
摘要:1. 概述1.1 应用场景对于已经制作好的「数据开发」和「数据管道」任务,希望能将任务的运行结果进行邮件通知,通知给对应的用户。1.2 功能简介FineDataLink 支持邮件的接收和发送。不论是邮件[阅读全文:]
摘要:4.2.3.3适配 InterSystems IRIS 数据源FineDataLink 支持连接 InterSystems IRIS 数据源,适配功能:定时任务读取和写入数[阅读全文:]
摘要:1. 概述FineDataLink 中的数据处理过程,详情参见:https://demo.finedatalink.com/ 「简道云输出-没有部门成员-」数据库中的「库存信息」表保存着全量且[阅读全文:]
摘要:1. 概述1.1 应用场景用户希望访问平台时,访问路径中没有/webroot/decision。用户希望只通过 IP 或者域名访问 Tomcat 工程。用户希望访问平台的 URL 能[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.2.1.4-4.2.4.3数据检测任务目录树,新增异常状态图标数据检测任务列表中,新增目录树刷新按钮1.2 应用场景某些业务系统中或者数仓[阅读全文:]
摘要:[helpvideo]8641[/helpvideo]1. 概述1.1 版本FineDataLink版本功能说明4.0.20.1-4.0.30支持按照应用维度查看调用记录4.1对于 API 运维方和调用[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.2.1.4运维中心处新增「检测任务>任务管理」,可查看、编辑数据检测任务的配置信息4.2.4.3数据检测任务目录树,新增异常状态图标[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.2.1.4运维中心处新增「检测任务>运行记录」,可查看多个数据检测任务的运行详情4.2.4.3数据检测任务目录树,新增异常状态图标1[阅读全文:]
摘要:1. 概述1.1 应用场景用户想要将数据库系统数据输出到简道云子表单中,实现子表单数据的新增、更新和删除。1.2 实现思路1)构建数据库中需要写入的子表单 JSON 数据2)构建简道云表单中已有的子表单[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink版本功能变动4.0.20.1-4.0.28数据服务支持应用管理功能,支持以应用的方式分组管理API调用方:支持对「应用」的基础管理功能(新建、编辑、删除、管[阅读全文:]
摘要:[helpvideo]8636[/helpvideo]1. 概述1.1 版本FineDataLink版本功能变动4.0.20.1支持的API发布的数据库版本:MySQL、Oracle、PostgreSQ[阅读全文:]
摘要:1. 概述1.1 应用场景用户想要将数据库系统数据输出到简道云多个子表单中,实现子表单数据的新增、更新和删除。注:若数据量不大或者简道云表单数据插入没有记录时间的固定字段,推荐使用增删改数据同步至简道云[阅读全文:]
摘要:1. 概述FDL 工程部署在 Linux 环境中,通过数据管道实时同步 PostgreSQL 数据前,需要参考本文在数据源中进行一些配置,为后续的数据同步做好准备。注1:FDL 工程部署在 W[阅读全文:]
摘要:1. 概述1.1 版本说明FineDataLink 版本功能变动1.7增加内置参数:${cyctime}、${workname.opresult}、${jobname.opresult}4.0.31)增[阅读全文:]
摘要:[helpvideo]8626[/helpvideo]1. 概述1.1 版本FineDataLink 版本功能变动4.0.30可配置全局参数,该参数可在多个定时任务中使用4.1.4交互优化4.1.8.1[阅读全文:]
摘要:1. 概述[helpvideo]8622[/helpvideo]1.1 版本说明FineDataLink 版本功能变动4.0.3.1新增「循环容器」节点,满足多个节点循环执行的场景4.0.30「循环容器[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.2.4.3新增「值替换」算子,可将字段的原值按照特定规则替换成新值1.2 功能简介新增「值替换」算子,可将字段的原值按照特定规则替换成新值[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.2.4.3-1.2 应用场景超级管理员可以给予某个对象「数据清洗规则」的授权权限,使该对象将成为一个次级管理员。次级管理员可以给下级成员分[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.2.4.3-1.2 应用场景管理员希望能为普通用户分配「数据清洗」中指定数据清洗规则的查看和编辑。本文将介绍管理员如何给用户分配数据清洗的[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.2.4-1.2 应用场景管理员希望能为普通用户分配「数据检测」中指定数据检测任务的查看和编辑权限。本文将介绍管理员如何给用户分配数据检[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.2.4.3-1.2 应用场景场景1:来源表中大量的表、字段都有同样的数据问题,需要统一设置清洗规则,将值匹配后替换;场景2:来源表敏感信息[阅读全文:]
摘要:1. 概述1.1 应用场景用户上游总公司需要将来源表的敏感信息字段批量加密、脱敏后写入表,提供给下游公司。1.2 解决思路使用全局清洗规则,设置规则为「加解密」,并通过值替换算子批量对指定数据进行加密。[阅读全文:]
摘要:1. 概述1.1 应用场景简道云来源表字段值都有同样的数据问题,例如字段值中有空格,需要将空格去除后写入目标表。1.2 解决思路使用全局清洗规则,将值匹配后统一替换。2. 操作步骤2.1 设置全局清洗规[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.3定时任务中,数据源是 MySQL、Oracle、SQLServer 时,支持调用数据库存储过程4.1.11.2HP Ver[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.29节点支持禁用4.1.6.1对于「参数赋值」「条件分支」「虚拟节点」这些不支持单独运行的节点,当其下游节点设置为「禁用」,则该节点不[阅读全文:]
摘要:1. 应用场景用户想要同步钉钉通信录中的用户信息。2. 方案一4.1.3 以及之后的版本支持的方案。FineDataLink 中的数据处理过程,详情参见:https://demo.finedatalin[阅读全文:]
摘要:1. 概述本文讲述如何从 PI 数据库取数。1.1 什么是PI数据库PI 数据库是由美国 OSIsoft 公司开发的一种适用于实时数据管理的系统。它提供了高性能的数据采集、存储和检索服务,通常用于工业自[阅读全文:]
摘要:1. 概述1.1 版本 FineDataLink 版本功能变动4.1.13.2数据开发-定时任务支持读取和写入 Amazon S3 数据源4.2.0.1统一用 S3 协议兼容目前已支持的全部文[阅读全文:]
摘要:1. 概述1.1 版本FDL 与相关插件最新的版本适配要求:注:登录 FDL 工程,点击「管理系统>注册管理」,可在「版本信息」Tab 中查看平台模块版本。平台模块版本开放平台-FineDataL[阅读全文:]
摘要:1. 概述用户开发实时任务,此时想要查看实时任务的状态和运行情况,本文将按照用户的操作流程,详细进行相关功能的讲解。2. 单个任务开发调试阶段2.1 运行任务报错用户开发了一个实时任务,想要运行看看效果[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1用户管理新增「数据开发用户」,与注册license共同控制使用FineDataLink 的用户数1.2 功能说明FineDat[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.9-4.1.7.2支持「上传更新」,即前端手动上传 JAR 包进行更新升级,解决每个月发布的中间版本不能提供一键升级的问题4.1.11[阅读全文:]
摘要:注:数据开发中实时任务当前属于内测阶段,如需试用或者了解详细信息,请联系技术支持(技术支持联系方式:前往「服务」,选择「在线支持」、电话「400-811-8890」)。1. 概述1.1 版本FineDa[阅读全文:]
摘要:[helpvideo]8619[/helpvideo]1. 概述1.1 版本FineDataLink 版本功能变动4.0.20新增简道云输出算子,可将数据输出到简道云中,供简道云使用支持将数据输出到包含[阅读全文:]
摘要:1. 概述单点登录 Single Sign On,简称为 SSO,SSO 的定义是在多个应用系统中,用户只需要登录一次就可以访问所有相互信任的应用系统。2. 索引注:点击下方链接中的[阅读全文:]
摘要:[helpvideo]8632[/helpvideo]1. 概述1.1 版本说明FineDataLink 版本功能变动4.0.5-4.1.3管道任务写入端主动检测 Kafka 连接是否异常,若[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变更3.7「数据转换」节点下新增「字段设置」功能,可实现数据流字段的选择、重命名、数据类型转换操作4.1.5.3支持批量删除和还原字段,详情参见本[阅读全文:]
摘要:[helpvideo]8637[/helpvideo]1. 概述1.1 版本FineDataLink 版本功能变动4.0.27「调度配置」名称修改为「任务控制」4.1.4「任务控制」中的调度配置Tab,[阅读全文:]
摘要:1. 概述本文整理用户在使用 FineDataLink 过程中遇到的问题,便于用户进行任务问题排查。2. 索引序号分类说明文档1部署升级工程部署常见问题回复工程部署FAQ部署报错:部署环境异常部署环境异[阅读全文:]
摘要:1. 概述1.1 版本 FineDataLink 版本功能变动4.2.1.4针对星环 ArgoDB 数据源:定时任务支持读取和写入管道任务支持写入库表管理功能支持该数据源数据服务功能[阅读全文:]
摘要:1. 概述1.1 版本 FineDataLink 版本功能变动4.1.13.2数据开发-实时任务支持读取 MQTT 数据源1.2 功能简介数据开发-实时任务支持读取 MQT[阅读全文:]
摘要:1. 概述1.1 版本 FineDataLink 版本功能变动4.1.13.2数据开发-实时任务支持读取 IBM MQ 数据源1.2 功能简介数据开发-实时任务支持读取 I[阅读全文:]
摘要:注:该功能当前属于内测阶段,如需试用或者了解详细信息,请联系技术支持(技术支持联系方式:前往「服务」,选择「在线支持」、电话「400-811-8890」)。1. 概述1.1 版本FineDataLink[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.5.3-1.2 应用场景FineDataLink 支持连接 SAP Sybase ASE 数据源进行定时任务读取。2. 使用[阅读全文:]
摘要:1. 概述1.1 版本 FineDataLink 版本功能变动4.0.28数据管道任务中支持写入至 SeaboxMPP 数据库4.1.5.5定时任务中支持读取和写入 Sea[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.4「管理系统>数据连接>数据连接管理」中,可新建 Greenplum(并行装载)数据连接定时任务读写适配 Greenplu[阅读全文:]
摘要:1. 概述1.1 版本说明 FineDataLink 版本功能变动4.0.8-4.1.2定时任务和数据管道任务中,装载方式新增COPY装载,写入数据较多时提升写入速度1.2 应用场景FineD[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.24-4.1.3数据写入星环 TRANSWARP INCEPTOR 数据库时,支持创建、写入分区表4.2.1.4数据源名称改[阅读全文:]
摘要:1. 概述1.1 版本 FineDataLink 版本功能变动4.1.11.3定时任务支持读取和写入 PolarDB PostgreSQL 数据库管道任务支持写入 PolarDB P[阅读全文:]
摘要:1. 概述1.1 版本 FineDataLink 版本功能变动4.1.11.2定时任务支持读取和写入 YMatrix 数据库管道任务支持写入 YMatrix 数据库数据服务支持读取&[阅读全文:]
摘要:1. 概述1.1 版本 FineDataLink 版本功能变动4.0.26-4.1.11.4支持定时任务写入1.2 简介MaxCompute(之前称为 ODPS),是阿里巴巴通用计算平台提供的[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink版本功能说明4.1.4数据管道来源端支持Sap Hana,版本要求为:2.0 SPS00~SPS074.1.5.4定时任务支持读取和写入 Sap[阅读全文:]