摘要:1. 概述JsonPath 運算式可用於解析 JSON 結構的資料,官方 API 文檔:https://github.com/json-path/JsonPath,本文僅為對英文官方文檔的翻譯。2. 基[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能變動4.0定時任務讀寫適配PostgreSQL4.0.9資料管道匯出適配 PostgreSQL4.0.11資料管道輸入適配 P[阅读全文:]
摘要:1. 概述CDC(Change Data Capture),即資料變更抓取,透過為源端資料源開啟CDC,可實現資料源的實時資料同步以及資料表的 DDL 同步。本章節主要介紹如何為 MySQL 資料庫開啟[阅读全文:]
摘要:1. 入門簡介FineDataLink 是帆軟軟體推出的一站式資料整合平台。FineDataLink 從高效專業的角度出發,低程式碼/高時效融合多種異構資料,幫助企業解決資料孤島問題,提升企業資料價值。[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能變動1.6現在資料夾永遠顯示在任務上方4.0.29定時任務節點視覺效果優化4.1.11.1「主頁」合到「維運中心」中,更名為「維運概覽」1.2 功[阅读全文:]
摘要:1. 版本FineDataLink 版本功能變動1.5數據輸入适配 API4.2.0.3針對 OceanBase(Oracle模式)數據源:定時任務支持讀取和寫入管道任務支持寫入庫表[阅读全文:]
摘要:1. 概述1.1 版本版本功能變動--4.0.14SystemConfig.driverUpload 參數預設值修改為 true4.1.5.1新增驅動載入順序配置項4.1.12.3驅動管理按鈕位置、樣式[阅读全文:]
摘要:1. 概述在FineDataLink部署之後,初始化設定時設定了系統管理者,也就是 FineDataLink 系統中的最大權限使用者,即超級管理者,但是 FineDataLink 中有多個使用者進行任務[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能變動4.1.11.3定時任務支援寫入 Elasticsearch 資料4.2.0.2定時任務支援讀取 Elastic[阅读全文:]
摘要:分類FineDataLinkKettle任務開發學習成本低:流程化任務開發,快速上手,更低的學習門檻,具有 SQL 能力即可完成複雜資料處理任務開發成本高:Kettle 產品功能設計風格接近傳[阅读全文:]
摘要:1. 概述1.1 版本版本功能變動4.1.11.4-1.2 應用場景為了便於使用者透過配置 Pulsar 消費者的方式,實時從 Pulsar 中取數。FineDataLink 支援配[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能變動4.1.11.4-1.2 應用場景使用者希望同步 FineDataLink 的 LogDB 資料到指定資料庫,然後報表使用這些資料製作看板。1[阅读全文:]
摘要:1. 概述1.1 版本 FineDataLink 版本功能變動4.1.11.2定時任務支持讀取和寫入 YMatrix 數據庫管道任務支持寫入 YMatrix 數據庫數據服務支持讀取&[阅读全文:]
摘要:1. 概述1.1 版本 FineDataLink 版本功能變動4.1.8.2定時任務支持讀取和寫入神通數據庫管道任務支持寫入神通數據庫數據服務支持讀取神通數據庫1.2 功能簡介FineData[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能變動4.1.5.3-1.2 應用場景FineDataLink 支援連結 SAP Sybase ASE 資料源進行定時任務讀取。2. 使用[阅读全文:]
摘要:1. 概述1.1 版本 FineDataLink 版本功能變動4.0.28資料管道任務中支援寫入至 SeaboxMPP 資料庫4.1.5.5定時任務中支援讀取和寫入 Sea[阅读全文:]
摘要:1. 概述1.1 版本 FineDataLink 版本功能變更4.0.23定時任務輸入匯出支援 Doris管道任務資料匯出支援 Doris4.1資料服務支援 Doris4.[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink版本功能說明3.5定時任務中,資料輸入適配 Impala4.0.1.1定時任務中,資料匯出適配 Impala4.1資料服務支援[阅读全文:]
摘要:1. 概述本文將介紹如何連結 HSQL(Hyper SQL) 資料庫。注:在 HSQL 資料庫中,要避免資料表的名稱以數字開頭,否則連結時可能會出現報錯。2. 準備工作2.1 版本和驅動驅動包下載地址已[阅读全文:]
摘要:1. 概述1.1 應用場景FineDataLink 支援連結 Presto,進行定時任務讀取。2. 準備工作2.1 前提條件詳情請參見:前提條件2.2 版本和驅動下載驅動,並將其上傳至 Fin[阅读全文:]
摘要:1. 概述1.1 版本 FineDataLink 版本功能變動3.2定時任務中支援讀取 ClickHouse3.7定時任務支援寫入 ClickHouse4.0.28管道任務[阅读全文:]
摘要:1. 概述FineDataLink 支援 Informix 進行定時任務讀寫。2. 準備工作2.1 版本和驅動下載驅動包,並將其上傳至 FineDataLink 中,如何上[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能變動3.2定時任務支援讀取 IBM DB23.6.2定時任務寫入支援 IBM DB24.1.3資料服務支援 DB2 資料源4.[阅读全文:]
摘要:1. 概述1.1 版本說明 FineDataLink 版本功能變動4.0.8-4.1.2定時任務和資料管道任務中,裝載方式新增COPY裝載,寫入資料較多時提升寫入速度1.2 應用場景FineD[阅读全文:]
摘要: 1. 概述1.1 版本 FineDataLink 版本功能變動4.0.7定時任務支援讀取和寫入達夢資料庫4.1.6.1管道任務支援寫入達夢資料庫4.1.6.3資料服務支援達夢資料庫[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能變動4.0.4「管理系統>資料連結>資料連結管理」中,可建立 Greenplum(並行裝載)資料連結定時任務讀寫適配 Greenplu[阅读全文:]
摘要:1. 概述本文介紹 FineDataLink 各個模組的功能及使用流程。2. 模組介紹FineDataLink 各模組支援的資料源請參見:FineDataLink支援的資料源各模組價值場景:價值場景2.[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.31)在定时任务编辑界面中,右键点击节点连线,提供「无条件执行」、「成功时执行」、「报错时执行」的节点连线配置2)在定时任务编辑界面中[阅读全文:]
摘要:[helpvideo]8628[/helpvideo]1. 概述1.1 版本FineDataLink 版本功能说明4.1.5.5-1.2 应用场景简道云/API附件移动:用户想要将简道云/API接口中的[阅读全文:]
摘要:SQL server数据连接连不上,报错The server selected protocol version TLS10 is [阅读全文:]
摘要:Kafka 相关管道运行中报错:Exception during get all topics from broker问题描述:管道运行中报错:ERROR Exception when re[阅读全文:]
摘要:新建定时任务,前端报错:任务不存在,无法获取文件问题描述:新建定时任务,前端报错“任务不存在,无法获取文件”。解决方案:linux 环境缺乏中文语言包。在新建任务时,生成的dp文件为???.dp,导致任[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink版本功能变动4.1.11.1-4.1.11.4来源端为「SQL」配置项支持Greenplum数据源1.2 应用场景用户希望根据数据表查找对应相关任务以及它的[阅读全文:]
摘要:1. 概述在进行 独立部署下读取FineBI公共数据、独立部署下定时任务结果输出至FineBI等操作时,需要确保 FineDataLink 与 FineReport 或者 FineBI 版本适[阅读全文:]
摘要:2024年4.1.13更新日志详情:4.1.13更新日志4.1.13.2发布日期:2024-10-171)FDL 中支持配置 Amazon S3 数据源的数据连接。数据开发-定时任务中可使用该[阅读全文:]
摘要:4.1.13.2定时任务支持从对象存储文件系统中读取文件FDL 中支持配置 Amazon S3 数据源的数据连接。数据开发-定时任务中可使用该数据连接,在阿里云 OSS,亚马逊 S3,MinI[阅读全文:]
摘要:数据转换运行日志报错:超出内存限制问题描述:任务运行失败,报错超出内存限制。原因分析:数据开发所占用的内存资源超过工程设置的上限。解决方案:可以根据实际运行任务情况,参考 机器要求 [阅读全文:]
摘要:1. 概述1.1 认证方式简介1)Kerberos 认证是 Hadoop 生态的一种通用的认证方式。2)配置 Kerberos 认证的方式有两种:直接使用数据连接配置界面中的 Kerberos 认证:主[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.8.1新增动态赋值参数设置功能4.1.13.2配置方式为「选表」时,支持选字段1.2 应用场景当多个定时任务需要使用相同的参数赋值时,[阅读全文:]
摘要:1. 概述[helpvideo]8624[/helpvideo]1.1 版本说明FineDataLink 版本功能变动1.7新增一种节点类型:「参数赋值」,可以将取到的数据输出为参数,被下游连线节点使用[阅读全文:]
摘要:注:数据开发中实时任务当前属于内测阶段,如需试用或者了解详细信息,请联系技术支持(技术支持联系方式:前往「服务」,选择「在线支持」、电话「400-811-8890」)。1. 概述1.1 版本FineDa[阅读全文:]
摘要:注:数据开发中实时任务当前属于内测阶段,如需试用或者了解详细信息,请联系技术支持(技术支持联系方式:前往「服务」,选择「在线支持」、电话「400-811-8890」)。1. 概述1.1 版本FineDa[阅读全文:]
摘要:注:数据开发中实时任务当前属于内测阶段,如需试用或者了解详细信息,请联系技术支持(技术支持联系方式:前往「服务」,选择「在线支持」、电话「400-811-8890」)。1. 概述1.1 版本FineDa[阅读全文:]
摘要:注:数据开发中实时任务当前属于内测阶段,如需试用或者了解详细信息,请联系技术支持(技术支持联系方式:前往「服务」,选择「在线支持」、电话「400-811-8890」)。1. 概述1.1 版本 [阅读全文:]
摘要:1. 概述1.1 版本 FineDataLink 版本功能变动4.1.13.2数据开发-实时任务支持读取 MQTT 数据源1.2 功能简介数据开发-实时任务支持读取 MQT[阅读全文:]
摘要:1. 概述1.1 版本 FineDataLink 版本功能变动4.1.13.2数据开发-实时任务支持读取 IBM MQ 数据源1.2 功能简介数据开发-实时任务支持读取 I[阅读全文:]
摘要:1. 概述本文档收集数据转换节点的常见问题,并给出答案。2. 数据转换2.1 简道云相关分类常见问题解决方案简道云数据连接FDL怎么获取简道云的数据源可参考 简道云输入典型示例 获取[阅读全文:]
摘要:1. 概述本文档收集数据开发模块的常见问题,并给出答案。2. 数据开发模块功能咨询分类常见问题解决方案数据同步VS数据转换「数据转换」节点能实现数据同步功能,那「数据同步」节点单独拿出来的意义是什么详情[阅读全文:]
摘要:1. 概述本文介绍参数在数据开发中的典型应用场景。如何配置并使用参数请参见:如何配置并使用参数2. 数据开发2.1 增量数据同步定时任务每次执行时,可只同步指定时间范围内、或指定主键范围内的数据到目标表[阅读全文:]
摘要:1. 概述本文档收集 FineDataLink 部署升级、产品模块的常见问题,并给出答案。2. 产品咨询分类常见问题解决方案功能体验请问可以提供 FineDataLink 的试用账号吗https://d[阅读全文:]
摘要:1. 概述单个定时任务、管道任务中设置日志等级:1)定时任务中,可在「任务控制>任务属性>日志等级设置」中,设置该定时任务的日志等级。如下图所示:详情请参见:日志等级设置2)管道任务中,可在[阅读全文:]
摘要:1. 概述本文档收集管理系统的常见问题,并给出答案。2. 管理系统2.1 权限常见问题解决方案FDL 的次级管理员,具有的权限有哪些? 是否可以分配给一些用户具有某些数据权限的能力次级管理员权限范围没有[阅读全文:]
摘要:数据服务模块咨询常见问题解决方案浏览器限制推荐使用谷歌和 Edge 浏览器最新版本,其他浏览器可能会有兼容问题。1)可以提供下数据服务的操作指导说明吗2)将处理后的数据输出一个API,别人调用这个API[阅读全文:]
摘要:1. 概述本文档收集数据管道模块的常见问题,并给出答案。2. 数据管道模块咨询常见问题解决方案1)帆软能否接收实时数据或者有什么方式接收2)如果我要实现源端到目标端的数据实时同步,用数据管道不用数据开发[阅读全文:]
摘要:注:数据开发中实时任务当前属于内测阶段,如需试用或者了解详细信息,请联系技术支持(技术支持联系方式:前往「服务」,选择「在线支持」、电话「400-811-8890」)。1. 概述1.1 版本FineDa[阅读全文:]
摘要:注:数据开发中实时任务当前属于内测阶段,如需试用或者了解详细信息,请联系技术支持(技术支持联系方式:前往「服务」,选择「在线支持」、电话「400-811-8890」)。1. 概述1.1 版本FineDa[阅读全文:]
摘要:注:数据开发中实时任务当前属于内测阶段,如需试用或者了解详细信息,请联系技术支持(技术支持联系方式:前往「服务」,选择「在线支持」、电话「400-811-8890」)。1. 概述1.1 版本FineDa[阅读全文:]
摘要:注:数据开发中实时任务当前属于内测阶段,如需试用或者了解详细信息,请联系技术支持(技术支持联系方式:前往「服务」,选择「在线支持」、电话「400-811-8890」)。1. 概述1.1 版本FineDa[阅读全文:]
摘要:1. 概述1.1 应用场景用户的 JSON 数据结构是多层数组嵌套,如下图所示:现需要解析上层数组元素和下层数组元素,实现 1:n 的关系。例如:希望 titles 数组中的字段,能与 items 数组[阅读全文:]
摘要:1. 概述为满足客户的新需求以及完善之前版本某些功能的不足之处,FineDataLink 在不断地更新迭代。若需要体验新产品功能或者修复之前版本中存在的一些问题,客户需要升级到当前最新版本。本文来说明如[阅读全文:]
摘要:[helpvideo]8616[/helpvideo]1. 概述1.1 版本FineDataLink 版本功能变动4.0.29「数据转换」节点中新增「Python 算子」4.1.6.2加载文件的默认路径[阅读全文:]
摘要:1. 概述[helpvideo]8620[/helpvideo]1.1 版本FineDataLink 版本功能变动1.0-4.1.3脚本配置Tab下,数据源是 MySQL、Oracle、SQL[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能说明4.0.30支持设置定时任务的调度依赖4.1.11.1事件调度优化支持设置当前任务执行的条件,并配置上下游任务组支持重试当前任务以及下游任务,[阅读全文:]
摘要:产品新功能数据连接优化Ø详情请参见:创建并管理数据源、数据连接权限概述1)数据连接可放在文件夹中进行管理。如下图所示:2)支持通过数据连接名称、数据源类型、创建人搜索已配置好的数据连接。如下图所示:3)[阅读全文:]
摘要:这里可以查看所有历史产品月报哦,点击封面即可打开对应月报啦~2024-092024-082024-072024-062024-052024-042024-032024-022024-012023-122[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动1.9-4.0.28注册失败提示优化,提供具体失败原因,帮助用户排查问题1.2 应用场景用户需要注册多个工程,多次导出工程信息十分麻[阅读全文:]
摘要:升级兼容说明4.1.12.3 版本,数据连接做了较大优化。升级到 4.1.12.3 版本前,需要做好 FineDB 备份,若需回退,需要还原 FineDB ,若回退时不还原 FineDB,将导[阅读全文:]
摘要:1. 概述FineDataLink 的数据开发、数据管道、数据服务、库表管理模块支持连接多种数据源进行数据的处理操作。在使用 FineDataLink 处理、同步数据前,您需要先定义数据连接,以便在执行[阅读全文:]
摘要:1. 概述1.1 应用场景普通用户希望创建/编辑/删除一个数据连接。普通用户希望使用某个数据连接做定时任务/管道任务、发布API等操作。超管希望分配数据连接的编辑、删除权限给某个用户。超管希望某个用户,[阅读全文:]
摘要:1. 概述FDL 工程部署在 Linux 环境中,通过数据管道实时同步 PostgreSQL 数据前,需要参考本文在数据源中进行一些配置,为后续的数据同步做好准备。注1:FDL 工程部署在 W[阅读全文:]
摘要:1. 概述[helpvideo]8622[/helpvideo]1.1 版本说明FineDataLink 版本功能变动4.0.3.1新增「循环容器」节点,满足多个节点循环执行的场景4.0.30「循环容器[阅读全文:]
摘要:1. 概述1.1 应用场景用户想使用 新增计算列 算子,获取当月天数。注:SQL 语句获取当月天数方案请自行百度。1.2 实现思路先获取当月第一天日期、下个月第一天日期,然后使用 D[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink版本功能变动4.1.11.1新增表事件调度表:fine_dp_exec_record_triggerfine_dp_schedulefine_dp_task[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink版本4.1.10.21.2 应用场景用户希望定时任务中的循环容器的循环次数上限无限制次数(当前默认 10000次);希望单个参数输出值的个数没有限制。便于用[阅读全文:]
摘要:1. 概述本文为你说明「数据开发」和「数据管道」的区别,帮助您更快地了解这两个模块。2. 数据开发与数据管道的区别区别项定时任务数据管道应用场景可视化多源异构数据整合,高效搭建数仓,消除数据孤岛、数据口[阅读全文:]
摘要:1. 概述用户在使用 FDL 时,可能会出现宕机而导致无法使用的情况,此时可以打堆栈进行排查,本文将说明如何打堆栈。堆栈可以发给帆软技术支持排查(技术支持联系方式:前往「服务」,选择「在线支持」、电话「[阅读全文:]
摘要:1. 概述1.1 应用场景某企业现在需要将某业务数据全部取出以供业务分析使用。由于数据量比较大,不可能一次性取全量数据,因此需要使用参数。接口文档中 pageNum 表示数据页数;p[阅读全文:]
摘要:1. 概述1.1 版本「数据同步-API」功能包含的设置项与 API 输入算子 相同,功能变动请参见:API输入 文档的 1.1 节内容。1.2 应用场景出于安全考虑,有时不允许直接访问数据库[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能说明--4.1.5.1新增加密函数和解密函数1.2 功能说明「编码函数」、「加密函数」、「签名函数」等常用于进行API加密认证取数时的 Token[阅读全文:]
摘要:[helpvideo]8619[/helpvideo]1. 概述1.1 版本FineDataLink 版本功能变动4.0.20新增简道云输出算子,可将数据输出到简道云中,供简道云使用支持将数据输出到包含[阅读全文:]
摘要:1. 概述1.1 应用场景简道云输出算子 不能选择「清空目标表,再写入数据」写入方式。用户在以下场景时,希望能先清空简道云表单再写入数据:简道云表单数据发生全面更新,不仅仅是部分更新或增量更新[阅读全文:]
摘要:1. 概述Kerberos 认证时,需要将驱动和 URL 按本文进行更改。2. 驱动数据库驱动URL格式驱动下载注意点TRANSWARP INCEPTOR(星环)jdbc:hive2://ip:port[阅读全文:]
摘要:1. 概述「数据开发>定时任务」模块支持在可视化界面使用各个节点和算子进行数据的抽取、转换和装载,并可以通过定时调度功能自动运行定时任务,帮助您轻松构建离线数仓,保证数据生产的高效稳定。本文为您说[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动1.9-4.1.4任务工具栏中的「保存并运行」按钮,修改为「运行」按钮「任务控制」中的调度配置Tab,单独独立出来,为「调度计划」4.1.5.[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动2.0-4.1.7.3记录读写过程日志\异常和错误日志使用过程中产生的过程日志,支持将运行记录导出为文件,以供查看和使用,详情参见本文 3.[阅读全文:]
摘要:[helpvideo]8638[/helpvideo]1. 概述定时任务开发完成后,可到「运维中心」界面查看定时任务运行情况、为多个/单个定时任务设置执行频率、为多个/单个定时任务设置事件调度、批量设置[阅读全文:]
摘要:1. 概述当用户设计好定时任务后,可以管理定时任务、监控任务运行状态和查看任务运行日志等。本文列举定时任务的常见运维操作。2. 前提条件已完成定时任务的创建、开发。详情请参见:数据开发概述3. 单个任务[阅读全文:]
摘要:1. 概述1.1 应用场景用户想要将 FTP/SFTP服务器/本地FineDataLink 工程中的图片、视频输出至指定的服务器中。1.2 实现思路使用「文件传输」节点,设置「文件来源」为FT[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.3定时任务中,数据源是 MySQL、Oracle、SQLServer 时,支持调用数据库存储过程4.1.11.2HP Ver[阅读全文:]
摘要:1. 概述[helpvideo]8625[/helpvideo]1.1 版本FineDataLink 版本功能变动4.0.13-4.1.0优化「参数输出」设置界面将「分隔符」单选按钮组改为「闭包符」开关[阅读全文:]
摘要:1. 概述1.1 背景某集团人员长期使用 FineBI 进行数据分析,FineBI的使用流程为:IT人员在FineBI中直接连接数据库数据,通过自助数据集对原始数据进行数据清洗和处理,形成业务人员可用的[阅读全文:]
摘要:1. 概述[helpvideo]8627[/helpvideo]1.1 版本说明FineDataLink 版本功能变动4.0.8-4.1.0「脚本参数」下拉框中显示已配置参数1.2 应用场景用户希望在[阅读全文:]
摘要:1. 概述1.1 应用场景某贸易公司,交易员每天使用 FineReport 填报模板,将新产生的订单或历史订单的修改数据录入到「补录表」中。「补录表」需要将最新数据同步到数据库表中;数据分析工具使用数据[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.10-4.1.12.2支持「选表」取数算子名称修改为「SAP ERP输入」函数调用配置方式下,导出参数的显示内容,由「...」调整为「[阅读全文:]
摘要:1. 概述1.1 应用场景用户数据存储在 SAP 中,因此需要对接SAP取数,但是由于数据安全问题或对SAP底层表并不了解,无法直接连接 SAP 的底层数据库取数。因此希望通过RFC接口调用的[阅读全文:]
摘要:1. 概述1.1 应用场景用户数据存储在 SAP 中,因此需要对接 SAP 取数,但是由于数据安全问题或对 SAP 底层表并不了解,无法直接连接 SAP 的底层数据库取数。因此希望调用 SAP 系统内已[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.10-4.1.12.2支持「选表」和「通用查询」取数1.2 功能说明选表查询类似 SQL 语句一样,从某张表中读取出某些列,并列出数据[阅读全文:]
摘要:1. 概述运维中心包括定时任务运维、实时任务运维、数据服务运维,为用户提供任务操作、状态、调度、运行记录等各方面任务维护功能,帮助用户更好的管理发布的任务。在「数据开发」中完成任务开发,并提交和发布至生[阅读全文:]
摘要:1. 概述API输出逻辑说明 已经介绍了API输出的基本功能,用户需要将多应用系统的数据通过FDL打通,实现业务系统间的数据交互(交互的形式为API),就可以通过 API 写入满足应用集成场景。本文以一[阅读全文:]
摘要:1. 概述数据比对功能说明 文档中介绍了「数据比对」算子的功能,本文以一个简单示例介绍该算子的使用。2. 示例示例demo详情参见:https://demo.finedatalink.com/ [阅读全文:]