"下架目录(不在目录树中显示,不可以搜到和通过链接访问)" 分类下的文档该分类下有713篇文档创建该分类下的文档
简道云输出算子:清空目标表,再写入数据
文档创建者:Wendy123456      创建时间:03-25 11:33      标签:      编辑:4次    |   浏览:958次

摘要:1. 概述1.1 应用场景简道云输出算子 不能选择「清空目标表,再写入数据」写入方式。用户在以下场景时,希望能先清空简道云表单再写入数据:简道云表单数据发生全面更新,不仅仅是部分更新或增量更新[阅读全文:]

Kerberos驱动整理
文档创建者:Roxy      创建时间:09-10 19:42      标签:      编辑:2次    |   浏览:150次

摘要:1. 概述Kerberos 认证时,需要将驱动和 URL 按本文进行更改。2. 驱动数据库驱动URL格式驱动下载注意点TRANSWARP INCEPTOR(星环)jdbc:hive2://ip:port[阅读全文:]

GaussDB 200数据源使用说明
文档创建者:Roxy      创建时间:01-10 17:23      标签:      编辑:7次    |   浏览:613次

摘要:使用限制FineDataLink 支持连接 GaussDB 200 ,进行定时任务读写、管道任务写入、数据服务读取、实时任务写入。GaussDB数据库不支持管道任务设置「目标端执行逻辑删除」。[阅读全文:]

数据平台授权权限
文档创建者:Wendy123456      创建时间:03-17 14:16      标签:      编辑:9次    |   浏览:3253次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动V1.5.2新增数据平台授权权限4.0.9支持为「数据管道」功能分配授权权限4.0.26支持为「数据服务」功能分配授权权限4.1.6.1支持为[阅读全文:]

数据平台使用权限
文档创建者:Wendy123456      创建时间:03-17 14:11      标签:      编辑:16次    |   浏览:8878次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动V1.5.2新增权限管理功能4.0.9支持为「数据管道」功能分配使用权限4.0.26支持为「数据服务」功能分配使用权限4.1.6.1支持为「库[阅读全文:]

定时任务能力说明
文档创建者:Wendy123456      创建时间:07-25 11:42      标签:      编辑:13次    |   浏览:1967次

摘要:1. 概述「数据开发>定时任务」模块支持在可视化界面使用各个节点和算子进行数据的抽取、转换和装载,并可以通过定时调度功能自动运行定时任务,帮助您轻松构建离线数仓,保证数据生产的高效稳定。本文为您说[阅读全文:]

定时任务界面介绍
文档创建者:Wendy123456      创建时间:04-18 10:04      标签:      编辑:26次    |   浏览:3298次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动1.9-4.1.4任务工具栏中的「保存并运行」按钮,修改为「运行」按钮「任务控制」中的调度配置Tab,单独独立出来,为「调度计划」4.1.5.[阅读全文:]

定时任务运维-运行记录
文档创建者:Wendy123456      创建时间:01-02 14:46      标签:      编辑:16次    |   浏览:1567次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动2.0-4.1.7.3记录读写过程日志\异常和错误日志使用过程中产生的过程日志,支持将运行记录导出为文件,以供查看和使用,详情参见本文 3.[阅读全文:]

批量定时任务运维概述
文档创建者:Wendy123456      创建时间:03-17 14:08      标签:      编辑:34次    |   浏览:14461次

摘要:[helpvideo]8638[/helpvideo]1. 概述定时任务开发完成后,可到「运维中心」界面查看定时任务运行情况、为多个/单个定时任务设置执行频率、为多个/单个定时任务设置事件调度、批量设置[阅读全文:]

定时任务运维指导
文档创建者:Roxy      创建时间:02-05 15:32      标签:      编辑:4次    |   浏览:2935次

摘要:1. 概述当用户设计好定时任务后,可以管理定时任务、监控任务运行状态和查看任务运行日志等。本文列举定时任务的常见运维操作。2. 前提条件已完成定时任务的创建、开发。详情请参见:数据开发概述3. 单个任务[阅读全文:]

使用文件传输节点传输图片/视频
文档创建者:Roxy      创建时间:09-13 10:25      标签:      编辑:2次    |   浏览:132次

摘要:1. 概述1.1 应用场景用户想要将 FTP/SFTP服务器/本地FineDataLink 工程中的图片、视频输出至指定的服务器中。1.2 实现思路使用「文件传输」节点,设置「文件来源」为FT[阅读全文:]

定时任务调用数据库存储过程
文档创建者:Wendy123456      创建时间:12-12 14:16      标签:      编辑:15次    |   浏览:2497次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.3定时任务中,数据源是 MySQL、Oracle、SQLServer 时,支持调用数据库存储过程4.1.11.2HP Ver[阅读全文:]

参数输出
文档创建者:Roxy      创建时间:11-15 10:55      标签:      编辑:20次    |   浏览:6201次

摘要:1. 概述[helpvideo]8625[/helpvideo]1.1 版本FineDataLink 版本功能变动4.0.13-4.1.0优化「参数输出」设置界面将「分隔符」单选按钮组改为「闭包符」开关[阅读全文:]

FDL和FineBI组合应用示例
文档创建者:Roxy      创建时间:08-02 17:11      标签:      编辑:14次    |   浏览:12992次

摘要:1. 概述1.1 背景某集团人员长期使用 FineBI 进行数据分析,FineBI的使用流程为:IT人员在FineBI中直接连接数据库数据,通过自助数据集对原始数据进行数据清洗和处理,形成业务人员可用的[阅读全文:]

Shell脚本
文档创建者:Roxy      创建时间:09-01 18:52      标签:      编辑:43次    |   浏览:9858次

摘要:1. 概述[helpvideo]8627[/helpvideo]1.1 版本说明FineDataLink 版本功能变动4.0.8-4.1.0「脚本参数」下拉框中显示已配置参数1.2 应用场景用户希望在[阅读全文:]

调用任务
文档创建者:Wendy123456      创建时间:03-17 14:01      标签:      编辑:28次    |   浏览:8996次

摘要:1. 概述[helpvideo]8670[/helpvideo]1.1 版本说明FineDataLink 版本功能变动3.2新增节点「调用任务」,可以在当前任务中调用执行其他任务,参数传递不支持跨层级,[阅读全文:]

FR填报补录数据后,触发FDL任务更新
文档创建者:Wendy123456      创建时间:02-27 09:57      标签:      编辑:26次    |   浏览:5516次

摘要:1. 概述1.1 应用场景某贸易公司,交易员每天使用 FineReport 填报模板,将新产生的订单或历史订单的修改数据录入到「补录表」中。「补录表」需要将最新数据同步到数据库表中;数据分析工具使用数据[阅读全文:]

SAP ERP取数概述
文档创建者:Roxy      创建时间:09-28 17:08      标签:      编辑:15次    |   浏览:4899次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.10-4.1.12.2支持「选表」取数算子名称修改为「SAP ERP输入」函数调用配置方式下,导出参数的显示内容,由「...」调整为「[阅读全文:]

带参数的SAP函数调用取数
文档创建者:Roxy      创建时间:09-28 16:20      标签:      编辑:7次    |   浏览:2690次

摘要:1. 概述1.1 应用场景用户数据存储在 SAP 中,因此需要对接SAP取数,但是由于数据安全问题或对SAP底层表并不了解,无法直接连接 SAP 的底层数据库取数。因此希望通过RFC接口调用的[阅读全文:]

不带参数的SAP函数调用取数
文档创建者:Roxy      创建时间:09-27 11:18      标签:      编辑:12次    |   浏览:2678次

摘要:1. 概述1.1 应用场景用户数据存储在 SAP 中,因此需要对接 SAP 取数,但是由于数据安全问题或对 SAP 底层表并不了解,无法直接连接 SAP 的底层数据库取数。因此希望调用 SAP 系统内已[阅读全文:]

SAP ERP选表查询
文档创建者:Roxy      创建时间:08-28 16:59      标签:      编辑:3次    |   浏览:291次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.10-4.1.12.2支持「选表」和「通用查询」取数1.2 功能说明选表查询类似 SQL 语句一样,从某张表中读取出某些列,并列出数据[阅读全文:]

注册简介
文档创建者:Roxy      创建时间:12-21 17:29      标签:      编辑:52次    |   浏览:13696次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.18集成部署 客户若未购买 FDL ,集成部署后的工程将屏蔽 FDL 功能入口,避免给客户带来困扰4.0.28新增数据服务注[阅读全文:]

通用查询取数
文档创建者:Roxy      创建时间:05-31 15:26      标签:      编辑:4次    |   浏览:73次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.10-4.1.12.2支持「选表」和「通用查询」取数1.2 功能说明通用查询比 SAP ERP 选表查询 增加了表间关联的能力,且支持[阅读全文:]

运维中心概述
文档创建者:Roxy      创建时间:09-11 18:09      标签:      编辑:2次    |   浏览:366次

摘要:1. 概述运维中心包括定时任务运维、实时任务运维、数据服务运维,为用户提供任务操作、状态、调度、运行记录等各方面任务维护功能,帮助用户更好的管理发布的任务。在「数据开发」中完成任务开发,并提交和发布至生[阅读全文:]

API输出典型示例
文档创建者:Roxy      创建时间:02-28 12:28      标签:      编辑:16次    |   浏览:9866次

摘要:1. 概述API输出逻辑说明 已经介绍了API输出的基本功能,用户需要将多应用系统的数据通过FDL打通,实现业务系统间的数据交互(交互的形式为API),就可以通过 API 写入满足应用集成场景。本文以一[阅读全文:]

数据比对典型示例
文档创建者:Wendy123456      创建时间:03-17 11:01      标签:      编辑:38次    |   浏览:11894次

摘要:1. 概述数据比对功能说明 文档中介绍了「数据比对」算子的功能,本文以一个简单示例介绍该算子的使用。2. 示例示例demo详情参见:https://demo.finedatalink.com/&nbsp[阅读全文:]

数据同步-数据库表
文档创建者:Wendy123456      创建时间:06-13 15:20      标签:      编辑:11次    |   浏览:6366次

摘要:1. 概述数据同步功能说明 中已介绍了「数据同步」节点的相关功能。本文以一个具体示例为您做介绍,演示从一个 MySQL 数据库的「产品」表的所有数据,抽取到另一个 MySQL 数据库中。2. 操作步骤2[阅读全文:]

JSON解析算子功能说明
文档创建者:Wendy123456      创建时间:07-31 09:21      标签:      编辑:24次    |   浏览:4878次

摘要:[helpvideo]8608[/helpvideo]1. 概述1.1 版本FineDataLink 版本功能变动3.5.1「数据转换」节点新增算子「JSON 解析」;支持将 JSON 结构的[阅读全文:]

文件输入功能说明
文档创建者:Roxy      创建时间:11-29 18:12      标签:      编辑:37次    |   浏览:9993次

摘要:[helpvideo]8610[/helpvideo]1. 概述1.1 版本说明FineDataLink 版本功能变动4.0.14-4.0.24FineDataLink 服务器本地和 FTP/[阅读全文:]

数仓调度场景概述
文档创建者:Roxy      创建时间:08-15 17:20      标签:      编辑:24次    |   浏览:15060次

摘要:1. 概述1.1 背景数据仓库的调度配置是实际业务中必不可少的一环。通过调度配置,可以实现数据的更新同步,从而让数据持续地应用在业务中。例如,某销售公司当前情况如下:当前有两个部门的数据:「销售」和「财[阅读全文:]

API入门
文档创建者:Roxy      创建时间:09-08 17:24      标签:      编辑:26次    |   浏览:17012次

摘要:1. 什么是 APIAPI(Application Programming Interface)是一种允许不同软件组件之间相互通信、交换信息的工具,他提供了一种统一的、规范化的途径,开发者只需遵循这些建[阅读全文:]

API专题
文档创建者:Roxy      创建时间:05-30 18:54      标签:      编辑:17次    |   浏览:5947次

摘要:本文介绍 FDL 中包含的 API 相关功能及使用说明。FDL 中 API 相关功能如下:读取 API 接口数据将数据写入到 API 接口中发布一个 API,供外部系统调用1. 功能点注册「必[阅读全文:]

FTP服务器中白名单文件自动传输与解压
文档创建者:Wendy123456      创建时间:09-10 16:23      标签:      编辑:5次    |   浏览:260次

摘要:1. 概述1.1 应用场景用户的业务数据以压缩包的形式每日进行下发,存储在 FTP 文件服务器对应的日期目录下,已经下发完成的压缩包文件会生成同名的 .ok 文件。用户需要将部分压缩包文件传输到另外一个[阅读全文:]

MongoDB输入
文档创建者:Wendy123456      创建时间:06-27 18:54      标签:      编辑:17次    |   浏览:5497次

摘要:1. 概述1.1 版本FineDataLink 版本功能变更4.0.4.2数据连接新增 MongoDB 类型「数据转换」节点新增算子「MongoDB输入」,可实现查询MongoDB指定集合数据的功能1.[阅读全文:]

加密锁认证
文档创建者:Roxy      创建时间:12-22 19:37      标签:      编辑:3次    |   浏览:1340次

摘要:1. 概述1.1 应用场景出于安全考虑,很多公司不能随便透露服务器的 MAC 地址。本地机器信息认证需要绑定物理信息,公有云认证需要连接外网,私有云认证需要提供一台物理信息不变的认证服务器。此时,用户可[阅读全文:]

如何配置并使用参数
文档创建者:Wendy123456      创建时间:05-27 11:21      标签:      编辑:16次    |   浏览:1900次

摘要:1.  概述本文讲述如何在定时任务中配置并使用参数。2. 步骤一:定义参数(必做)FDL 中参数分为三类:任务内参数、全局参数、内置参数。如下图所示:注:「参数列表」界面展示的参数为该任务可使[阅读全文:]

数据比对功能说明
文档创建者:Wendy123456      创建时间:07-20 15:24      标签:      编辑:21次    |   浏览:5989次

摘要:1. 概述[helpvideo]8614[/helpvideo]1.1 版本FineDataLink 版本功能变动3.3「数据转换」节点新增算子「比对删除」,可将来源表中删除数据的操作同步到目标表4.0[阅读全文:]

定时调度
文档创建者:Roxy      创建时间:08-02 11:27      标签:      编辑:2次    |   浏览:804次

摘要:1. 概述定时调度用在希望数据开发中已经发布的任务按照调度配置周期性自动调度的任务,以保证数据时效性。可以在调度计划> 定时调度列表查看当前任务设置的定时调度,并对任务进行运维操作。2.[阅读全文:]

独立部署下定时任务结果输出至FineBI
文档创建者:Roxy      创建时间:08-10 15:26      标签:      编辑:9次    |   浏览:3484次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.27独立部署时支持将 FineDataLink 处理好的数据输出至 FineBI交互界面优化4.1.3无需进行文件配置通过数据连接,支[阅读全文:]

Doris数据源使用说明
文档创建者:Roxy      创建时间:01-10 16:38      标签:      编辑:16次    |   浏览:1771次

摘要:版本 FineDataLink 版本功能变动4.0.23定时任务输入输出支持 Doris管道任务数据输出支持 Doris4.0.27写入到 Doris 采用 stream load[阅读全文:]

调度配置说明--零碎记录(让我自己删)
文档创建者:Wendy123456      创建时间:06-17 16:57      标签:      编辑:6次    |   浏览:121次

摘要:注意事项调度时间仅定义任务预期执行时间,其实际执行时间还受上游执行情况控制DataWorks上任务一旦设置依赖,即表示上下游任务间存在数据依赖。无论下游任务定时运行时间为几点,均需等上游任务执行完成后,[阅读全文:]

XML解析算子
文档创建者:Roxy      创建时间:09-08 15:18      标签:      编辑:22次    |   浏览:4795次

摘要:[helpvideo]8609[/helpvideo]1. 概述1.1 版本FineDataLink 版本功能变动4.0.9新增「XML解析」算子,可以将输入的 XML 数据解析为行列形式的数据1.2[阅读全文:]

数据同步-写入方式
文档创建者:Roxy      创建时间:12-28 15:07      标签:      编辑:11次    |   浏览:4493次

摘要:1. 概述1.1 版本FineDataLink版本功能说明--4.0.181)移除了「比对字段」和「更新策略」2)写入方式「直接将数据写入目标表」,更新为「追加写入数据」4.0.28调整「写入方式」和「[阅读全文:]

API输入
文档创建者:Roxy      创建时间:08-10 19:12      标签:      编辑:45次    |   浏览:15700次

摘要:[helpvideo]8607[/helpvideo]1. 概述1.1 版本说明FineDataLink 版本功能变动1.5数据来源中的数据源类型支持 API4.1.3支持分页取数,详情参见:API输入[阅读全文:]

调用定时任务相关接口说明
文档创建者:Wendy123456      创建时间:09-07 15:43      标签:      编辑:22次    |   浏览:6700次

摘要:1. 概述1.1 版本FineDataLink 版本开放平台-FineDataLink接口插件4.0.291.0.11.2 应用场景用户希望能够按需触发/执行定时任务,以提高数据时效性,场景如下所示:业[阅读全文:]

容器化部署
文档创建者:Carly      创建时间:11-21 10:27      标签:      编辑:5次    |   浏览:7436次

摘要:1. 概述1.1 版本FineDataLink版本4.01.2 功能简介服务器部署一直都是比较繁重的运维操作。为了降低部署带来的较高成本,帆软提供 FineOps 运维平台,支持使用运维平台前端容器化部[阅读全文:]

报价咨询
文档创建者:Roxy      创建时间:06-01 14:05      标签:      编辑:3次    |   浏览:12569次

摘要:1. 概述FineDataLink 支持本地安装部署,安装步骤请参见:FineDataLink部署方式介绍在部署后可根据用户的需求,自行购买基础功能和指定功能点并进行注册使用。注:若想要体验 FineD[阅读全文:]

Tomcat独立部署FDL
文档创建者:Bernard丶      创建时间:04-18 17:29      标签:      编辑:39次    |   浏览:47053次

摘要:1. 概述FineDataLink 版本功能变动4.0.1.1-4.0.6独立部署包工程默认端口号修改为 8068本文档将会详尽介绍独立部署的操作方法。2. Windows 环境2.1 环境准[阅读全文:]

FineDataLink产品简介
文档创建者:Wendy123456      创建时间:03-16 16:07      标签:      编辑:32次    |   浏览:103666次

摘要:[helpvideo]9107[/helpvideo]1. 概述FineDataLink 是一款低代码/高时效的企业级一站式数据集成平台,面向用户大数据场景下,实时和离线数据采集、集成、管理的[阅读全文:]

数据服务错误代码表
文档创建者:Roxy      创建时间:12-18 13:53      标签:      编辑:3次    |   浏览:1322次

摘要:1. 概述FineDataLink 数据服务接收到调用 API 的请求后,会将请求结果信息返回给请求端,其中包含各类错误码。通过解读错误码,您可以快速定位问题并自助排错。本文为您介绍常见数据服务错误码及[阅读全文:]

使用数据服务对数据进行分发管控
文档创建者:Roxy      创建时间:08-17 11:13      标签:      编辑:2次    |   浏览:2591次

摘要:1. 概述1.1 应用场景某公司旗下各个地区有多个分公司和分店,且使用同一套业务系统。业务数据会全部汇总到总部的数据库内,分店只能在业务系统上看到特定的分析和数据,无法实现自定义分析。总部希望对数据进行[阅读全文:]

使用数据服务发布的API(POST x-www-form-urlencoded请求)
文档创建者:Roxy      创建时间:08-14 19:54      标签:      编辑:13次    |   浏览:2221次

摘要:1. 概述1.1 版本FineDataLink版本功能变动4.0.20.1-4.0.28数据发布 API 的 POST 请求方式,额外支持 x-www-form-urlencoded 格式4.1接口调用[阅读全文:]

使用数据服务发布的API(POST application/json请求)
文档创建者:Roxy      创建时间:03-22 20:05      标签:      编辑:28次    |   浏览:5881次

摘要:1. 概述1.1 版本FineDataLink版本功能变动4.0.20.1-4.0.28数据发布API的POST请求方式,额外支持x-www-form-urlencoded格式4.1接口调用返回码优化;[阅读全文:]

发布API-参数为空查询全部
文档创建者:Roxy      创建时间:08-14 17:35      标签:      编辑:14次    |   浏览:2205次

摘要:1. 概述1.1 版本FineDataLink版本功能变动4.0.28数据发布 API 参数支持配置必填/非必填1.2 应用场景用户想要在发布 API 时,对 API 取数逻辑进行设置:未传指定参数,则[阅读全文:]

发布API-查询NULL值数据
文档创建者:Roxy      创建时间:08-14 17:21      标签:      编辑:18次    |   浏览:1976次

摘要:1. 概述1.1 版本FineDataLink版本功能变动4.0.28数据发布 API 参数支持传入 NULL 值1.2 应用场景用户想要在发布 API 时,对 API 取数逻辑进行设置:取出发布的 A[阅读全文:]

发布API-多值查询
文档创建者:Roxy      创建时间:08-14 16:52      标签:      编辑:15次    |   浏览:4265次

摘要:1. 概述1.1 版本FineDataLink版本功能变动4.0.28支持使用 IN 语法实现多值查询1.2 应用场景用户想要在发布 API 时,对 API 取数逻辑进行设置:使用 SQL 的 IN 语[阅读全文:]

配置API黑白名单
文档创建者:Roxy      创建时间:08-14 19:38      标签:      编辑:2次    |   浏览:2714次

摘要:[helpvideo]8635[/helpvideo]1. 概述在进行数据发布时,用户需要配置好发布环境,也就是设置当前 API 发布后,外部系统调用是否需要开通黑白名单,以保证发布的 API 接口在被[阅读全文:]

数据服务简单示例
文档创建者:Wendy123456      创建时间:01-24 10:29      标签:      编辑:4次    |   浏览:3737次

摘要:1. 概述本文讲述如何使用 FDL 发布一个 API ,且发布后的 API 如何在 FDL 工程中调用。2. 开发者:发布API2.1 准备工作注:对外 Demo 平台上已准备好环境,可到 对[阅读全文:]

关闭Oracle归档日志
文档创建者:Roxy      创建时间:12-25 15:02      标签:      编辑:1次    |   浏览:759次

摘要:1. 概述由于开启日志会在指定的归档日志目录生成大量的日志文件,可能会影响业务数据库的性能,若用户停止使用管道任务或者其他原因需要关闭归档日志,则可参考本文进行设置。2. 操作步骤2.1 关闭数据库登录[阅读全文:]

清理Oracle归档日志
文档创建者:Roxy      创建时间:12-25 11:47      标签:      编辑:4次    |   浏览:1441次

摘要:1. 概述Oracle 启用归档日志的状态下,会在指定的归档日志目录生成大量的日志文件,而且这些日志文件默认是不会定期清理。长时间运行后,会占用大量的存储空间,最终可能导致 Oracle 没有足够的空间[阅读全文:]

数据库环境准备概述
文档创建者:Roxy      创建时间:03-29 15:18      标签:      编辑:6次    |   浏览:6434次

摘要:1. 概述通过数据管道实时同步数据时,执行同步任务前,需要在数据源中进行一些配置,开启数据库日志并进行数据库权限设置,以便 FineDataLink 监听数据管道来源端的数据库日志变化,进行实[阅读全文:]

字段拆列
文档创建者:Wendy123456      创建时间:11-13 20:28      标签:      编辑:8次    |   浏览:1934次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.2新增「字段拆列」算子,字段值按照特定规则(分隔符或字符数)拆分,拆分后的结果形成新的多列字段和值4.1.7.3交互优化,选取字段改为[阅读全文:]

任务控制-结果通知
文档创建者:Wendy123456      创建时间:01-02 11:40      标签:      编辑:10次    |   浏览:1442次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.264.0.26 版本之前,「结果通知」需要「开启调度」才能设置;4.0.26 版本及之后,「结果通知」可以单独开启4.0.28「结果[阅读全文:]

解析并关联多个JSON数组字段
文档创建者:Wendy123456      创建时间:08-25 11:16      标签:      编辑:10次    |   浏览:2486次

摘要:注:本文方案适用于 4.1.6.2 之前版本。1. 概述1.1 应用场景用户的 JSON 数据中包含多个数组字段,如下图所示:希望解析数组字段,且解析后的字段一一对应。如下图所示:1.2 实现思路「JS[阅读全文:]

BI仪表板展示管道任务编辑信息
文档创建者:Wendy123456      创建时间:11-07 15:03      标签:      编辑:6次    |   浏览:1373次

摘要:1. 概述1.1 应用场景用户想了解某个管道任务是谁编辑的、编辑时间、断点相关信息等,FDL 工程内的 管道任务运维 无法满足需求。1.2 实现思路用户可根据实际需求,使用 Fine[阅读全文:]

TRANSWARP INCEPTOR数据源使用说明
文档创建者:Roxy      创建时间:08-29 16:53      标签:      编辑:4次    |   浏览:277次

摘要:版本FineDataLink版本功能变动4.1.3定时任务自动建表支持指定分区定时任务支持选择分区表作为数据去向使用限制由于Hive底层存储(HDFS)的限制,数据同步、数据转换-DB表输出中仅支持追加[阅读全文:]

单点登录
文档创建者:Wendy123456      创建时间:09-04 14:15      标签:      编辑:3次    |   浏览:612次

摘要:1. 概述单点登录 Single Sign On,简称为 SSO,SSO 的定义是在多个应用系统中,用户只需要登录一次就可以访问所有相互信任的应用系统。2. 索引注:点击下方链接中的[阅读全文:]

Spark SQL
文档创建者:Wendy123456      创建时间:03-16 16:10      标签:      编辑:30次    |   浏览:11778次

摘要:[helpvideo]8617[/helpvideo]1. 概述1.1 版本FineDataLink 版本功能变更3.6.2数据转换节点 新增算子「Spark SQL」算子,可实现较灵活的数据转换功能4[阅读全文:]

部署升级常见问题
文档创建者:Carly      创建时间:03-06 15:08      标签:      编辑:13次    |   浏览:2558次

摘要:1. 概述为满足客户的新需求以及完善之前版本某些功能的不足之处,FineDataLink在不断地更新迭代。若需要体验新产品功能或者修复之前版本中存在的一些问题,客户需要将FDL升级到当前最新版本。本文简[阅读全文:]

配置PostgreSQL外接数据库
文档创建者:帆软用户ki9NQpCL3P      创建时间:07-12 16:23      标签:      编辑:3次    |   浏览:985次

摘要:1. 概述1.1 版本FineDataLink 版本功能变更4.0-1.2 功能简介FineDataLink 配置外接数据库后,遇到集群环境或数据量较大情况时,可[阅读全文:]

API取数使用说明
文档创建者:Wendy123456      创建时间:07-16 16:45      标签:      编辑:16次    |   浏览:1508次

摘要:1. 概述FDL 提供两个功能进行接口取数,区别如下:功能说明「数据同步-API」功能若接口返回值为较简单的 JSON 格式,不需要复杂的解析处理,可参考本文进行接口取数API输入 算子若用户[阅读全文:]

管理系统问题排查
文档创建者:Wendy123456      创建时间:04-12 16:38      标签:      编辑:9次    |   浏览:714次

摘要:邮箱报错 535 Error: authentication failed问题描述:发送邮件失败,报错:535 Error: authentication failed解决方案:密码应该填写授权码,而不[阅读全文:]

参数概述
文档创建者:Roxy      创建时间:07-28 19:55      标签:      编辑:27次    |   浏览:7119次

摘要:[helpvideo]8623[/helpvideo]1. 概述为方便数据平台任务各节点相互关联,例如 B 节点的运行结果作为 A 节点的输入值进行后续计算;或者方便用户对数据进行调度配置。FineDa[阅读全文:]

对接文件数据专题
文档创建者:Roxy      创建时间:05-21 18:29      标签:      编辑:4次    |   浏览:1082次

摘要:1. 概述1)用户在搭建数仓时希望关联 Excel、csv 等文件数据进行业务分析;2)希望将加工后的数据以文件形式分享使用、以文件形式进行数据归档;3)文件数据流传输归档:将简道云/API接口中的附件[阅读全文:]

获取目录下符合条件的文件,按写入方式读取入库并记录状态
文档创建者:Wendy123456      创建时间:09-02 10:20      标签:      编辑:6次    |   浏览:379次

摘要:1. 概述1.1 应用场景用户业务流程中下发的文件,有特定的文件生成则代表下发完成。比如:文件下发完成后,目录下会生成与文件同名的 .ok 文件(用来判断文件是否下发完成)、.del 文件(根[阅读全文:]

分组汇总
文档创建者:Wendy123456      创建时间:11-13 14:23      标签:      编辑:7次    |   浏览:2241次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.2新增「分组汇总」算子,对原始数据根据条件将相同的数据先合并到一组,然后按照分组后的数据进行汇总计算4.1.6.1分组与汇总框支持拖拽[阅读全文:]

PolarDB PostgreSQL数据源使用说明
文档创建者:Roxy      创建时间:08-29 15:19      标签:      编辑:2次    |   浏览:244次

摘要: 版本FineDataLink版本功能变动4.1.9.3定时任务、管道任务自动建表支持指定分区定时任务支持选择分区表作为数据来源或者数据去向数据服务支持选择分区表作为数据来源任务开发配置数据连[阅读全文:]

4.1.x 版本间升级
文档创建者:Wendy123456      创建时间:05-06 09:52      标签:      编辑:55次    |   浏览:14335次

摘要:本文仅用于指导非运维平台部署的FineDataLink4.1.x工程升级。运维平台部署的FineDataLink工程,请通过运维平台进行升级,详情请参见:外网升级运维项目、内网升级运维项目1. 概述为满[阅读全文:]

2024-08产品月报
文档创建者:Wendy123456      创建时间:08-27 16:48      标签:      编辑:5次    |   浏览:595次

摘要:产品新功能数据开发定时任务支持读取 FineLogDB(FDL) 数据用户希望同步 FineDataLink 的 LogDB 数据到指定数据库,然后报表使用这些数据制作看板。FineDataLink 支[阅读全文:]

4.1.11 更新日志
文档创建者:Roxy      创建时间:07-31 16:50      标签:      编辑:9次    |   浏览:2175次

摘要:4.1.11.5定时任务数据同步优化配置方式选择「选表」时,若选择了指定数据表,来源表界面展示表所在数据库或者模式,例如下面的来源表展示了所在数据库 demo1,如下图所示:当数据来源的配置方式为「选表[阅读全文:]

SparkSQL语法概述
文档创建者:Wendy123456      创建时间:03-31 16:34      标签:      编辑:29次    |   浏览:15844次

摘要:1. 概述1.1 版本FineDataLink 版本功能变更3.6.2数据转换节点 新增算子「Spark SQL」算子,可实现较灵活的数据转换功能4.0.17「Spark SQL」算子支持使用[阅读全文:]

Hadoop Hive数据源使用说明
文档创建者:Roxy      创建时间:08-29 17:07      标签:      编辑:1次    |   浏览:262次

摘要: 版本FineDataLink版本功能变动4.1.3定时任务自动建表支持指定分区定时任务支持选择分区表作为数据去向任务开发配置数据连接 详情请参见:配置Hadoop Hive数据源数[阅读全文:]

读取、创建、写入分区表
文档创建者:Wendy123456      创建时间:12-19 10:55      标签:      编辑:15次    |   浏览:2993次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.3数据写入Hive、星环 TRANSWARP INCEPTOR数据库时,支持创建、写入分区表支持读取 Postgr[阅读全文:]

服务平台使用异常排查
文档创建者:帆软用户ki9NQpCL3P      创建时间:05-19 11:38      标签:      编辑:1次    |   浏览:1110次

摘要:1. 概述如果在使用在线支持窗口的过程中,遇到收不到消息、发不了文件等情况,可以按照如下提示排查下浏览器和网络情况。2. 浏览器无法收到消息提醒1)推荐使用PC端的Chrome、Firefox、Edge[阅读全文:]

帆软服务平台简介
文档创建者:Roxy      创建时间:10-11 15:37      标签:      编辑:11次    |   浏览:7194次

摘要:1. 概述1.1 应用场景帆软服务平台 https://home.fanruan.com/service (以下简称「服务平台」)是帆软提供给合作/准合作客户的一套自助服务受理平台。[阅读全文:]

企业认证操作说明
文档创建者:Roxy      创建时间:10-11 15:50      标签:      编辑:6次    |   浏览:3804次

摘要:1. 概述帆软旗下支持与服务平台 https://service.fanruan.com/(以下简称「服务平台」)是帆软提供给合作/准合作客户的一套自助服务受理平台。客户使用此平台可以实现自助[阅读全文:]

企业成员操作说明
文档创建者:Roxy      创建时间:10-11 15:55      标签:      编辑:2次    |   浏览:2397次

摘要:1. 概述帆软旗下支持与服务平台 https://service.fanruan.com/(以下简称「服务平台」)是帆软提供给合作/准合作客户的一套自助服务受理平台。客户使用此平台可以实现自助[阅读全文:]

企业管理员操作说明
文档创建者:Roxy      创建时间:10-11 15:53      标签:      编辑:2次    |   浏览:3010次

摘要:1. 概述帆软旗下支持与服务平台 https://service.fanruan.com/(以下简称「服务平台」)是帆软提供给合作/准合作客户的一套自助服务受理平台。客户使用此平台可以实现自助[阅读全文:]

Greenplum数据源使用说明
文档创建者:Roxy      创建时间:01-11 09:56      标签:      编辑:9次    |   浏览:657次

摘要:版本FineDataLink版本功能变动4.1.1 Greenplum 数据源作为源表,支持 无主键同步4.1.9.3定时任务支持选择分区表作为数据来源或数据去向定时任务、[阅读全文:]

YMatrix数据源使用说明
文档创建者:Wendy123456      创建时间:08-08 13:49      标签:      编辑:6次    |   浏览:361次

摘要:版本FineDataLink版本数据库版本功能变动4.1.11.25.X定时任务支持读取和写入 YMatrix 数据库管道任务支持写入 YMatrix 数据库数据服务支持读取 YMa[阅读全文:]

PostgreSQL数据源使用说明
文档创建者:Roxy      创建时间:08-29 11:26      标签:      编辑:6次    |   浏览:297次

摘要:版本FineDataLink版本功能变动4.1.3支持定时任务读取 PostgreSQL 数据库的分区表4.1.9.3分区表和普通表有标识区别定时任务、管道任务自动建表支持指定分区定时任务支持[阅读全文:]

FineDataLink词汇表
文档创建者:Wendy123456      创建时间:03-17 20:53      标签:      编辑:53次    |   浏览:19434次

摘要:1. 概述本文对 FineDataLink 的特有概念进行解释说明,以便用户进行使用。2. 功能模块名称包含数据开发、数据管道、数据服务、任务运维等功能,满足用户对数据进行同步、处理、清洗等一[阅读全文:]

数据同步方案概述
文档创建者:Roxy      创建时间:09-06 19:30      标签:      编辑:28次    |   浏览:12119次

摘要:1. 概述数据同步包括定时同步、实时同步两个功能模块。选择使用哪个功能模块,需考虑要进行的数据同步是定时还是实时、增量还是全量等,不同模块的支持情况不同,此外还需要重点关注:数据的来源与去向、待同步的表[阅读全文:]

数据同步-基于标识字段,新增/修改/删除数据
文档创建者:Wendy123456      创建时间:08-15 13:46      标签:      编辑:14次    |   浏览:4123次

摘要:1. 概述1.1 应用场景用户希望将筛选出的数据,只做新增/更新/删除操作。用户来源表数据已经有了标识字段和标识值,需要对目标表数据进行新增/更新/删除操作。1.2 功能简介在 数据同步&nb[阅读全文:]

简道云数据增删改同步至数据库
文档创建者:Roxy      创建时间:09-01 19:30      标签:      编辑:26次    |   浏览:4354次

摘要:1. 概述1.1 背景某公司大量使用简道云表单进行业务填报,每天产生大量数据。为了与其他系统数据联合使用,这些数据需要定期同步至指定数据库中。根据简道云录入表单数据的增删改情况,有以下几种情况:表单数据[阅读全文:]

StarRocks数据源使用说明
文档创建者:Roxy      创建时间:01-09 11:37      标签:      编辑:15次    |   浏览:1731次

摘要:版本 FineDataLink 版本功能变动4.0.24定时任务输入输出支持 StarRocks管道任务数据输出支持 StarRocks4.1.2数据服务支持 StarRocks4.1.3St[阅读全文:]

定时任务并发数与脏数据说明
文档创建者:Roxy      创建时间:02-04 18:08      标签:      编辑:10次    |   浏览:2062次

摘要:1. 并发数1.1 问题描述由于 FineDataLink 中定时任务需要占用内存和并发资源等,因此用户可能需要根据实际的使用情况进行任务调整。阅读此部分,你可以解决和理解如下问题:问题一:如何配置定时[阅读全文:]

配置Oracle外接数据库
文档创建者:Roxy      创建时间:08-08 16:58      标签:      编辑:5次    |   浏览:1934次

摘要:1. 概述1.1 功能简介 FineDataLink 系统配置外接数据库后,遇到集群环境或数据量较大情况时,可保证系统的稳定性。用户可在「初始化时」配置外接数据库或在「管理[阅读全文:]

实时任务授权权限
文档创建者:Roxy      创建时间:08-23 11:48      标签:      编辑:1次    |   浏览:248次

摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.11.4-1.2 应用场景超级管理员可以给予某个对象「实时任务」的授权权限,使该对象将成为一个次级管理员。次级管理员可以给下级成员分配[阅读全文:]

实时任务管理权限
文档创建者:Roxy      创建时间:08-23 11:20      标签:      编辑:0次    |   浏览:279次

摘要: 1. 概述1.1 版本FineDataLink 版本功能变动4.1.11.4-1.2 应用场景管理员希望能为普通用户分配「实时任务」中指定的文件夹和实时任务的查看和编辑权限。本文将介绍管理员[阅读全文:]