摘要:1. 概述1.1 版本FineDataLink 版本功能变动1.6现在文件夹永远显示在任务上方4.0.29定时任务节点视觉效果优化4.1.11.1「主页」合到「运维中心」中,更名为「运维概览」1.2 功[阅读全文:]
摘要:[helpvideo]8591[/helpvideo]1. 入门简介FineDataLink 是帆软软件推出的一站式数据集成平台。FineDataLink 从高效专业的角度出发,低代码/高时效融合多种异[阅读全文:]
摘要:1. 版本1.1 版本FineDataLink 版本同步LDAP域插件版本功能变更4.0V2.0-1.2 应用场景用户希望从 LDAP 服务器中同步用户,但是需要把 LDAP 服务器中的数据转[阅读全文:]
摘要:1. 提前准备1.1 软件环境序号软件版本要求说明1FDL当前最新版本连接器基于FDL构建的,用到数据开发功能2部署mysql,并新建一个数据库,数据库名为“U9”8.0及以上用[阅读全文:]
摘要: 1. 提前准备1.1 软件环境序号软件版本要求说明1FDL当前最新版本连接器基于FDL构建的,用到数据开发功能2部署mysql,并新建一个数据库,数据库名为“U8”8[阅读全文:]
摘要:1. 谁需要连接器如果你当前正处在下面所描述的场景中,或者这样的场景即将到来,连接器对你的价值帮助将会很大。注:想要了解更多复用详情,可留下相关信息,帆软相关人员会联系您:FDL了解试用2. 连接器定位[阅读全文:]
摘要:1. 整体结构NC 系统前端分一个个业务模块,比如应收应付、存货核算、供应链等、企业报表,有些模块底层有若干明细表与之对应,有些模块,是即时计算,底层没有直接对应数据表。NC连接器在设计时候,从两个维度[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能说明4.0.29-1.2 应用场景对数据安全性要求高的用户,需要对发布的 API 进行更高安全性的鉴权方式设置,提供更安全的认证方式,满足更严格的[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.9.3支持用户自定义字段类型映射规则,并配置生效的数据连接。「自动建表字段类型映射」、「管道DDL」、「定时任务来源字段变化感知」时,[阅读全文:]
摘要:1. 概述本文介绍 SparkSQL 中的字符串函数语法。2. 字符串字符数推荐使用FineDataLink 新增计算列中的LEN-返回字符长度。CHAR_LENGTH(s):返回字符串 s[阅读全文:]
摘要:1. 概述本文来介绍 SparkSQL 中的一些常用操作符合语法。2. 常用操作符操作符含义详情=等值比较A=B。如果表达式 A 与表达式 B 相等,则为TRUE;否则为 FALSE在 FineData[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本4.0.1.1及以后1.2 功能简介为满足多类型客户的使用诉求,FineDataLink支持多种部署方式,支持独立部署、集群部署、容器化部署[阅读全文:]
摘要:1. 概述本文介绍 SparkSQL 中的聚合函数语法。2. COUNT-统计个数示例原表如下图所示:count(*):统计检索出的行的个数,包括 NULL 值的行。 在 SparSQL 中使[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变更4.0-1.2 应用场景帆软支持开发者自行开发插件,并上传至帆软商城分享给他人。开发者希望通过插件售卖,获得一定利益,从而投入更多精[阅读全文:]
摘要:1. 概述本文介绍 SparkSQL 中的数学函数语法。2. ROUND-四舍五入取整说明:返回某个数字按指定位数舍入后的数字。用法:ROUND(数值, 舍入位数)数值:要进行四舍五入的数字。舍入位数:[阅读全文:]
摘要:兼容说明升级到 4.2.2.2 版本注意事项:使用「数据检测」功能的用户,升级到 4.2.2.2 版本后,需要改动 FineDB,建议联系技术支持获取详情。4.2.2.4 注册状态提醒数据开发[阅读全文:]
摘要:1. 概述1.1 功能简介配置外接数据库后,遇到集群环境或数据量较大情况时,可保证系统的稳定性。用户可在「初始化时」配置外接数据库或在「管理系统」配置 MySQL 5 版本的外接数据库。注:若[阅读全文:]
摘要:1. 概述在 导入用户、同步用户 前需要进行数据表的准备,将需要进行导入或者同步的数据表首先接入 FineDataLink 系统,并进行简单的数据处理,以便后续进[阅读全文:]
摘要:1. 概述1.1 应用场景用户需要将美团企业版的接口数据取出,例如希望将 订单列表查询 中的数据取出,如下图所示:而「美团企业版」的所有接口调用需要对请求参数进行加密,响应参数进行解[阅读全文:]
摘要:1. 概述1.1 应用场景一个企业的职工人数是相当多的,并且由于人员的流动性,用户信息一直在变化,如果每次都通过手动添加修改,工作量将会非常大。FineDataLink 用户同步数据集功能可以[阅读全文:]
摘要:1. 概述1.1 应用场景客户有数据表,是存储公司联系人信息的,需要校验表字段:校验联系人手机号是否合法。1.2 实现思路使用「数据检测」功能,创建检测规则,选择字段级规则,并设置检测对象为「字段行统计[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.5-4.1.2运行中的任务支持查看任务配置情况4.2.1.11)管道任务状态划分为任务级、表级:任务级状态增加「启动中」、「暂停中」、[阅读全文:]
摘要:[helpvideo]8607[/helpvideo]1. 概述1.1 版本说明FineDataLink 版本功能变动1.5数据来源中的数据源类型支持 API4.1.3支持分页取数,详情参见:API输入[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.2.0.1-1.2 应用场景一条数据流中做不同数据处理,希望将数据落到数仓中的不同层,比如dwd、dws层;上游数据把不同的数据都放在一个[阅读全文:]
摘要:1. 概述本文介绍 SparkSQL 中的条件函数语法。2. IF-条件判断推荐使用FineDataLink 新增计算列中的 IF-条件判断 函数。操作示例详情参见:新增列[阅读全文:]
摘要:[helpvideo]8617[/helpvideo]1. 概述1.1 版本FineDataLink 版本功能变更3.6.2数据转换节点 新增算子「Spark SQL」算子,可实现较灵活的数据转换功能4[阅读全文:]
摘要:[helpvideo]8623[/helpvideo]1. 概述为方便数据平台任务各节点相互关联,例如 B 节点的运行结果作为 A 节点的输入值进行后续计算;或者方便用户对数据进行调度配置。FineDa[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动1.7支持自定义参数功能:「参数设置」2.0允许定义值相同的参数,但是会给出提醒,详情参见本文 4.1 节4.0.19支持定义的参数类型,从日[阅读全文:]
摘要:1. 概述1.1 应用场景应用场景一:4.0.24 之前版本,用户希望自动化读取相同类型的文件,为企业降本增效。例如:某国有企业旗下有 100 多家分公司,子公司财务每月需要向总部提交各种财务预算和决算[阅读全文:]
摘要:本文介绍 FDL 中包含的 API 相关功能及使用说明。FDL 中 API 相关功能如下:读取 API 接口数据将数据写入到 API 接口中发布一个 API,供外部系统调用1. 功能点注册「必[阅读全文:]
摘要:1. 什么是 APIAPI(Application Programming Interface)是一种允许不同软件组件之间相互通信、交换信息的工具,他提供了一种统一的、规范化的途径,开发者只需遵循这些建[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.11.3-1.2 应用场景用户通过从关系型数据库中将待检索的数据写入到 Elasticsearch 里,将 Elasticsearch[阅读全文:]
摘要:1. 概述在现实的业务中,有很多数据需要通过 API 接口调用使用。因此本文为用户介绍在 FineDataLink 中使用 API 取数并进行数据解析处理,最终将数据写入指定数据库的方案。注:若需要使用[阅读全文:]
摘要:1. 概述运维中心包括定时任务运维、实时任务运维、数据服务运维,为用户提供任务操作、状态、调度、运行记录等各方面任务维护功能,帮助用户更好的管理发布的任务。在「数据开发」中完成任务开发,并提交和发布至生[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动3.1-3.7「DB表输出」算子的「数据去向」Tab 中若选择「自动建表」,「字段映射」Tab 下可删除表字段、修改表字段展示顺序、修改表字段[阅读全文:]
摘要:1. 概述[helpvideo]8614[/helpvideo]1.1 版本FineDataLink 版本功能变动3.3「数据转换」节点新增算子「比对删除」,可将来源表中删除数据的操作同步到目标表4.0[阅读全文:]
摘要:1. 概述本文档收集数据管道模块的常见问题,并给出答案。2. 数据管道模块咨询常见问题解决方案1)帆软能否接收实时数据或者有什么方式接收2)如果我要实现源端到目标端的数据实时同步,用数据管道不用数据开发[阅读全文:]
摘要:版本 FineDataLink 版本功能变动4.2.1.4数据开发-实时任务中的 DB 输出功能支持新增流的无主键插入,详情参见使用限制下的实时任务说明使用限制FineDataLink 支持连[阅读全文:]
摘要:1. 概述1.1 应用场景用户希望将离线 XML 文件内的数据解析成二维表并落库。1.2 实现思路将 XML 文件放置在 FTP 环境或者 FineDataLink 工程的 webroot 下;然后使用[阅读全文:]
摘要:兼容说明1)升级到 4.2.1.1 版本前,务必做好 FineDB 备份。若升级后创建了新的管道任务,需要回退,回退后需要在 FineDB 数据库中的 fine_dp_pipeline_exe[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.2.1.4-1.2 功能简介1)数据检测任务运行后,可能有运行失败、不通过的情况,此时需要检查失败原因并进行修正。如下图所示:2)数据检测[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.1「操作日志」表格的模块字段中,新增数据管道、数据开发、数据服务模块4.1.5.4新增「用户行为」Tab4.2.1.4操作日志Tab下[阅读全文:]
摘要:1. 概述1.1 应用场景客户有数据表,是存储公司客户信息的,需要校验表字段:校验 FID (公司ID)主键唯一性。1.2 实现思路使用「数据检测」功能,创建检测规则,选择字段级,选择字段FI[阅读全文:]
摘要:Kafka 相关管道运行中报错:Exception during get all topics from broker问题描述:管道运行中报错:ERROR Exception when re[阅读全文:]
摘要:新建定时任务,前端报错:任务不存在,无法获取文件问题描述:新建定时任务,前端报错“任务不存在,无法获取文件”。解决方案:linux 环境缺乏中文语言包。在新建任务时,生成的dp文件为???.dp,导致任[阅读全文:]
摘要:邮箱报错 535 Error: authentication failed问题描述:发送邮件失败,报错:535 Error: authentication failed解决方案:密码应该填写授权码,而不[阅读全文:]
摘要:1. 概述1.1 应用场景设备异常处理场景中,多为现场工作人员或 IOT 平台人员发现设备异常,再人工通知维修部进行工单分配,多环节均效率低下。FineDataLink 可基于IOT→FineDataL[阅读全文:]
摘要:1. 概述用户使用简道云系统进行业务流转、表单上报等,若需要将收集的简道云数据取出,结合其他系统数据进行数据分析;或者在制作简道云表单时,很多数据需要从业务系统取数,需要将数据写入简道云系统中,此时均可[阅读全文:]
摘要:1. 概述FineDataLink 工程中的平台配置信息,如管道任务、定时任务、权限控制、系统管理信息等,均存储于 FineDB 数据库。注:FineDB 数据库中不存储平台属性配置信息。FineDat[阅读全文:]
摘要:1. 概述1.1 应用场景用户数据存储在 SAP 中,因此需要对接 SAP 取数,但是由于数据安全问题或对 SAP 底层表并不了解,无法直接连接 SAP 的底层数据库取数。因此希望调用 SAP 系统内已[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变更4.1.6.4定时任务支持写入 MongoDB1.2 应用场景有些用户业务系统的数据库是 MongoDB,需要通过定时任务[阅读全文:]
摘要:1. 概述[helpvideo]8620[/helpvideo]1.1 版本FineDataLink 版本功能变动1.0-4.1.3脚本配置Tab下,数据源是 MySQL、Oracle、SQL[阅读全文:]
摘要:1. 概述1.1 问题描述Linux 服务器中部署帆软应用时,出现报错打开的文件过多或者too many open files,如下图所示:1.2 原因分析Linux 系统对每个登录用户打开的[阅读全文:]
摘要:1. 概述1.1 问题描述用户在定时任务进行数据同步时,如果源数据库同时有增删改变化,且来源表有时间戳时,可以使用数据比对,但是如果数据量很大,想要更好的提高同步效率,就可以使用本文的方案进行数据同步。[阅读全文:]
摘要:本文档示例由广州医软智能科技有限公司提供,在此特别鸣谢。注:该示例为从企业自建应用中使用接口取数的步骤,如果只想要使用通讯录同步获取 userid 和 department 数据,可以参考:API取数-[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.27独立部署时支持将 FineDataLink 处理好的数据输出至 FineBI交互界面优化4.1.3无需进行文件配置通过数据连接,支[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink版本功能说明--4.0.181)移除了「比对字段」2)写入方式「直接将数据写入目标表」,更新为「追加写入数据」4.0.28调整「写入方式」和「字段映射」的顺[阅读全文:]
摘要:1. 概述文件输入 文档讲述了「文件输入」算子的基本功能,「文件输入」算子支持从 FineDataLink 服务器本地和 FTP/SFTP 服务器上读取 Excel 和 CSV 文件[阅读全文:]
摘要:1. 概述[helpvideo]8629[/helpvideo]1.1 版本FineDataLink 版本功能变动3.6.1新增节点「消息通知」,可将任务调度结果以企业微信群机器人的形式通知给指定用户4[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink版本功能变动4.1.5.4-4.1.8.2DB表输出支持来源字段结构变化后提示更新字段映射,详情参见本文 2.2 节4.1.9.3支持用户自定义字段类型映射[阅读全文:]
摘要:[helpvideo]8628[/helpvideo]1. 概述1.1 版本FineDataLink 版本功能说明4.1.5.5-1.2 应用场景简道云/API附件移动:用户想要将简道云/API接口中的[阅读全文:]
摘要:注:本文方案适用于 4.1.6.2 之后版本。1. 概述1.1 应用场景用户的 JSON 数据中包含多个数组字段,如下图所示:希望解析数组字段,且解析后的字段一一对应。如下图所示:1.2 实现思路使用[阅读全文:]
摘要:注:本文方案适用于 4.1.6.2 之前版本。1. 概述1.1 应用场景用户的 JSON 数据中包含多个数组字段,如下图所示:希望解析数组字段,且解析后的字段一一对应。如下图所示:1.2 实现思路「JS[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变更4.0.1.1「管理系统>智能运维>资源迁移」的资源导出 Tab 下,新增 ETL 任务的导出;资源导入 Tab 下,可导入 ET[阅读全文:]
摘要:1. 概述1.1 问题描述用户工程部署在 Tomcat 容器中,若遇到以下问题:内存溢出错误:java.lang.OutOfMemoryError:Java heap spaceFineDataLink[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.11.4-1.2 应用场景超级管理员可以给予某个对象「实时任务」的授权权限,使该对象将成为一个次级管理员。次级管理员可以给下级成员分配[阅读全文:]
摘要: 1. 概述1.1 版本FineDataLink 版本功能变动4.1.11.4-1.2 应用场景管理员希望能为普通用户分配「实时任务」中指定的文件夹和实时任务的查看和编辑权限。本文将介绍管理员[阅读全文:]
摘要:1. 概述1.1 应用场景公司通过飞书多维表格设计了一套数据填报应用,但数据均在云上,需要通过API接口进行下载数据,并关联目前的应用数据等。1.2 接口说明接口文档详情参见:读取多个范围1.3 实现思[阅读全文:]
摘要:1. 概述1.1 应用场景用户从吉客云读取一张 1300W 数据量的表存储到阿里云的 ApsaraDB for MySQL。「数据转换」节点中处理数据时,由于数据量过大,数据读取的时间超过了数据库允许[阅读全文:]
摘要:1. 概述1.1 应用场景用户有一接口返回 XML 格式数据(数据量较多),希望从该接口中取出所有数据。存在问题如下:需要循环取数,但接口没有分页结束标识。API输入-分页取数 功能目前不支持[阅读全文:]
摘要:1. 应用场景某企业现在需要将某业务工单数据全部取出以供业务分析使用。由于数据量比较大,不可能一次性取全量数据,因此需要使用参数。接口文档中 pageIndex 表示数据页数;pag[阅读全文:]
摘要:1. 概述1.1 应用场景某企业现在需要将某业务数据全部取出以供业务分析使用。由于数据量比较大,不可能一次性取全量数据,因此需要使用参数。接口文档中 pageNum 表示数据页数;p[阅读全文:]
摘要:1. 概述1.1 版本说明插件版本版本依赖功能变动V1.0FineRpeort 版本:11.0FineBI 版本:5.1.10-V2.0FineRpeort 版本:11.0.4FineBI 版[阅读全文:]
摘要:1. 概述如果在使用在线支持窗口的过程中,遇到收不到消息、发不了文件等情况,可以按照如下提示排查下浏览器和网络情况。2. 浏览器无法收到消息提醒1)推荐使用PC端的Chrome、Firefox、Edge[阅读全文:]
摘要:1. 概述1.1 应用场景帆软服务平台 https://home.fanruan.com/service (以下简称「服务平台」)是帆软提供给合作/准合作客户的一套自助服务受理平台。[阅读全文:]
摘要:1. 概述1.1 应用场景用户希望将筛选出的数据(没有标识字段)写入目标表,且写入的数据只做新增/更新/删除操作。用户来源表数据已经有了标识字段和标识值,需要对目标表数据进行新增/更新/删除操作。1.2[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变更4.0.4.2数据连接新增 MongoDB 类型「数据转换」节点新增算子「MongoDB输入」,可实现查询MongoDB指定集合数据的功能1.[阅读全文:]
摘要:1. 概述[helpvideo]8605[/helpvideo]FineDataLink 提供了包含数据开发、任务运维等功能,满足用户对数据进行同步、处理、清洗等一系列的需求。本文为你说明「数据同步」和[阅读全文:]
摘要:1. 概述1.1 应用场景用户简道云流程流转中,下游表单需要使用上游表单经过 FDL处理后的数据。用户希望 FDL 可以代替简道云的数据工厂进行数据处理。1.2 实现思路简道云表单中可调用执行定时任务的[阅读全文:]
摘要:1. 概述在设置好管道任务后,FineDataLink 支持对数据实时同步进行监控,查看任务运行情况,快速查看和处理脏数据。模块说明参考文档任务列表说明管道任务可放在文件夹中进行管理;用户可复制、移动、[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.5-4.0.7管道任务列表交互界面优化4.0.27支持文件夹管理管道任务4.0.29任务支持复制到指定文件夹位置4.1.2运行中的任务[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.5-4.0.27脏数据处理优化,支持对单表和多表生成的脏数据进行忽略、重试或者重新同步4.1.2脏数据展示优化脏数据处理优化4.2.1[阅读全文:]
摘要:1. 概述本文讲述如何使用数据管道功能。2. 准备工作准备工作说明步骤一(必做):准备 FDL 独立部署工程管道任务仅支持在 独立部署 环境下使用参考 FineD[阅读全文:]
摘要:注:数据开发中实时任务当前属于内测阶段,如需试用或者了解详细信息,请联系技术支持(技术支持联系方式:前往「服务」,选择「在线支持」、电话「400-811-8890」)。1. 概述1.1 版本FineDa[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 产品版本功能变动4.0.19信创版-1.2 功能简介FineDataLink 支持了一些国产化的操作系统、中间件、芯片;同时支持使用一些国产化的数据源和浏[阅读全文:]
摘要:[helpvideo]8591[/helpvideo]1. 概述1.1 版本FineDataLink 版本功能变动1.9-4.1.9.3支持使用回收站对删除的任务进行还原,详情参见:回收站支持「Kett[阅读全文:]
摘要:1. 概述1.1 版本说明FineDataLink 版本功能变动4.2.1.1-1.2 应用场景在配置 实时任务任务后,希望对所有数据开发中的实时任务进行统一的管理。比如批量启动任务、删除任务[阅读全文:]
摘要:产品新功能定时任务支持修改ETL结果表的结构优化前:ETL 结果表的字段不支持调整(新增、删除),若要调整只能删表重建,成本和影响比较大。优化后:支持对目标表新建、删除字段、重命名字段。支持修改目标表字[阅读全文:]
摘要:兼容说明1)升级到 4.2.0.1 版本时,更换 JAR 前,需要将 %Tomcat/webapps/webroot/WEB-INF/lib% 下后缀为 4.1 的 jar [阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.30可配置全局参数,该参数可在多个定时任务中使用4.1.4交互优化1.2 应用场景当多个定时任务需要使用相同的自定义参数(任务参数)时[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.2.0.3支持批量导入/导出定时任务、调度计划1.2 应用场景1)资源复用场景将标准化场景任务进行资源打包,提供给 IT 人员后,IT 人[阅读全文:]
摘要:[阅读全文:]
摘要:[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.2.0.2-1.2 应用场景用户的业务数据库是 Elasticsearch 数据库,需要定时读取 Elasticsearch 数[阅读全文:]
摘要:1. 概述[helpvideo]8606[/helpvideo]1.1 版本说明FineDataLink 版本功能变动3.1新增节点「数据转换」4.1.2新增「字段拆列」「字段拆行」「分组汇总」算子4.[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.11.4-1.2 应用场景用户希望同步 FineDataLink 的 LogDB 数据到指定数据库,然后报表使用这些数据制作看板。1.[阅读全文:]
摘要:1. 概述1.1 应用场景SAP RFC 一次性取数过大时,驱动可能会崩溃,FDL 也可能会宕机。部分 RFC 函数提供了 ROWCOUNT、ROWSKIPS 和 date 参数,分[阅读全文:]
摘要:概述本文对帮助文档中 FineDataLink 的实际应用文档进行筛选、整理、归类、排版,形成了内容合辑,文章按难易程度、内容模块整理分类为不同的篇章,点击标题即可进入相应文章。持续更新中……业务场景案[阅读全文:]
摘要:1. 概述[helpvideo]8604[/helpvideo]1.1 应用场景用户同步数据时,在以下场景中,可使用「数据同步」节点实现:数据无需进行复杂的数据处理,希望快速完成数据表的同步。目标库计算[阅读全文:]
摘要:1. 概述1.1 背景某集团长期使用 Finereport 制作报表看板,开发人员小A 在使用过程中发现一些问题:由于使用 FineReport 直连业务库,通过复杂sql实现报表取数,导致前端报表展示[阅读全文:]