摘要:1. 概述1.1 版本FineDataLink 版本功能变动1.04.0.30工程重启后,新增重新注册强提醒1.2 应用场景本地容器认证是专为私有云、虚拟服务器等无固定服务器或经常变更的服务器环境设计的[阅读全文:]
摘要:1. 概述1.1 版本版本功能变动--4.0.14SystemConfig.driverUpload 参数默认值修改为 true4.1.5.1新增驱动加载顺序配置项1.2 应用场景在连接 FineDat[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.21FineDataLink 独立部署版本, 「管理系统>数据连接>数据连接管理」处,屏蔽不支持的数据源类型数据连接名称支[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink版本fine_conf_entity 可视化配置插件功能变更4.0V1.9-4.0.11V1.9.11取消支持四个参数配置SystemC[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0-4.0.27插件管理全面优化:1)支持批量管理插件,包括:批量禁用/启用、全部更新2)插件管理界面拆分为[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动1.9-4.0.30手动添加用户时,用户名和姓名中包含的字符限制放宽1.2 应用场景管理员可手动添加单个用户,并设置用户信息。管理员[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.27支持批量设置任务调度计划4.0.30「调度计划」中新增「事件调度」,可为多个定时任务配置统一事件调度「调度计划」中定时调度 Tab[阅读全文:]
摘要:1. 概述1.1 版本说明FineDataLink 版本功能变动4.0.4-4.0.27脏数据处理优化,支持对单表和多表生成的脏数据进行忽略、重试或者重新同步4.0.29任务管理支持通过文件夹管理4.1[阅读全文:]
摘要:1. 概述1.1 应用场景本文适用于新增数据的场景,若数据被修改、删除,需参见文档:数据比对更多数据同步方案请参见:数据同步方案概述1.2 方案简介在数据同步时,为了保证数据时效性,有时我们需要对数据定[阅读全文:]
摘要:1. 概述1.1 应用场景用户数据存储在 SAP 中,因此需要对接 SAP 取数,但是由于数据安全问题或对 SAP 底层表并不了解,无法直接连接 SAP 的底层数据库取数。因此希望通过 RFC 接口调用[阅读全文:]
摘要:1. 概述1.1 应用场景用户数据存储在 SAP 中,因此需要对接SAP取数,但是由于数据安全问题或对SAP底层表并不了解,无法直接连接 SAP 的底层数据库取数。因此希望通过RFC接口调用的[阅读全文:]
摘要:1. 概述FineDataLink 版本功能变动4.0.1.1-4.0.6独立部署包工程默认端口号修改为 8068为满足多类型客户的使用诉求,FineDataLink 从 4.0.1.1 版本开始支持独[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动3.5.1「数据转换」节点新增算子「JSON 解析」;支持将 JSON 结构的数据输出为行列格式4.1.1将 API body 的响[阅读全文:]
摘要:1. 概述1.1 应用场景对于已经制作好的「数据开发」和「数据管道」任务,希望能将任务的运行结果进行邮件通知,通知给对应的用户。1.2 功能简介FineDataLink 支持邮件的接收和发送。不论是邮件[阅读全文:]
摘要:1. 概述[helpvideo]5451[/helpvideo]1.1 版本FineDataLink 版本功能变动4.0.13-4.1.0优化「参数输出」设置界面将「分隔符」单选按钮组改为「闭包符」开关[阅读全文:]
摘要:1. 概述1.1 功能简介管理员登录 FineDataLink 数据平台,点击「管理系统>外观配置>平台样式」,即可进入平台样式的设置界面。平台样式的设置包括「平台标题」[阅读全文:]
摘要:1. 概述1.1 版本说明插件版本版本依赖功能变动V1.0FineRpeort 版本:11.0FineBI 版本:5.1.10-V2.0FineRpeort 版本:11.0.4FineBI 版[阅读全文:]
摘要:1. 概述在 导入用户、同步用户 前需要进行数据表的准备,将需要进行导入或者同步的数据表首先接入 FineDataLink 系统,并进行简单的数据处理,以便后续进[阅读全文:]
摘要:兼容说明1)FR 与 FDL 集成的工程,任意版本手动更新到 4.1.5.2 及之后版本时,需删除%Tomcat_HOME%/webapps/webroot/WEB-INF/lib目录下的fine-bi[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.20新增简道云输出算子,可将数据输出到简道云中,供简道云使用支持将数据输出到包含部分控件类型的简道云表单中,详情请参见本文 2.1 节[阅读全文:]
摘要:1. 概述[helpvideo]3266[/helpvideo]1.1 版本FineDataLink 版本功能变更4.0.2.1数据连接新增「简道云」类型「数据转换」节点新增算子「简道云输入」1.2 应[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.29节点支持禁用4.1.6.1对于「参数赋值」「条件分支」「虚拟节点」这些不支持单独运行的节点,当其下游节点设置为「禁用」,则该节点不[阅读全文:]
摘要:1. 概述1.1 应用场景管理员可将整理好的用户信息表一次性导入 FineDataLink 系统。管理员可多次导入用户信息,部门,角色。管理员可对导入的用户进行编辑、禁用、删除。用户希望Fin[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动1.9-4.0.28注册失败提示优化,提供具体失败原因,帮助用户排查问题1.2 应用场景用户需要注册多个工程,多次导出工程信息十分麻[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.4新增「备注说明」节点,可为任务添加备注各节点新增「节点信息」Tab,存放节点名称、节点备注信息4.0.8「备注说明」节点可覆盖其他节[阅读全文:]
摘要:产品新功能数据开发简道云私有部署支持使用TLS/SSL认证简道云私有部署支持使用 TLS/SSL 认证。如下图所示:详情请参见:配置简道云数据源支持同步表备注、字段备注开发人员和使用业务库人员,是不同的[阅读全文:]
摘要:产品新功能数据开发文件原样迁移定时任务中,API接口、本地服务器、FTP/SFTP之间,支持文件的原样迁移。如下图所示:详情请参见:文件传输功能说明定时任务支持读取和写入 SeaboxMPP定[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.4「管理系统>数据连接>数据连接管理」中,可新建 Greenplum(并行装载)数据连接数据输入适配 Greenplum、[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动1.9日志新增:写入数据行数、更新数据行数3.4显示的具体日志中,将「中止」改为「终止」4.0.1任务运行日志优化,提供更准确的日志信息,降低[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.2新增「分组汇总」算子,对原始数据根据条件将相同的数据先合并到一组,然后按照分组后的数据进行汇总计算4.1.6.1分组与汇总框支持拖拽[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变更4.1.0新增「上下合并」算子,可对多张表进行上下行合并,输出一张合并表4.1.6.1修改合并结果字段名称后,若再修改合并的数据表字段,不影响[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.221)新增登录风格「大窗口」2)原「默认」风格更名为「小窗口」4.1.6.1新增「显示备案信息」按钮,支持在登录页底部显示[阅读全文:]
摘要:1. 概述1.1 版本 FineDataLink 版本功能变动4.0.28数据管道任务中支持写入至 SeaboxMPP 数据库4.1.5.5定时任务中支持读取和写入 Sea[阅读全文:]
摘要:1. 概述数据同步包括定时同步、实时同步两个功能模块。选择使用哪个功能模块,需考虑要进行的数据同步是定时还是实时、增量还是全量等,不同模块的支持情况不同,此外还需要重点关注:数据的来源与去向、待同步的表[阅读全文:]
摘要:1. 概述[helpvideo]3268[/helpvideo]1.1 版本FineDataLink 版本功能变更3.7「数据转换」节点下新增「字段设置」功能,可实现数据流字段的选择、重命名、数据类型转[阅读全文:]
摘要:1. 概述[helpvideo]3255[/helpvideo]1.1 版本说明FineDataLink 版本功能变动1.6新增「自动建表」功能下拉框支持模糊搜索字段映射界面增加刷新按钮4.1.31)数[阅读全文:]
摘要:1. 概述语法NOW()获取当前时间 返回值类型日期时间注:若需要获取不带时分秒的当前时间,可使用TODAY-当前日期2. 示例公式结果[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.19新增「数据过滤」算子,过滤符合条件的数据4.0.28运算符选择「为空」时,可过滤出值为空格的数据1.2 应用场景用户数据存在空值,[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.1统一产品内条件判断逻辑4.1.5.5「文件传输」使用该条件判断说明1.2 功能简介本文对产品内条件判断逻辑进行说明。包括:「数据过滤[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.30鼠标左键点击节点,可配置节点名称和备注1.2 应用场景如果希望多个节点可以并行运行后再转到下游节点,可借助「虚拟节点」实现。调度无[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.30可配置全局参数,该参数可在多个定时任务中使用4.1.4交互优化1.2 应用场景当多个定时任务需要使用相同的参数时,如果参数需要修改[阅读全文:]
摘要:[helpvideo]5454[/helpvideo]1. 概述为方便数据平台任务各节点相互关联,例如 B 节点的运行结果作为 A 节点的输入值进行后续计算;或者方便用户对数据进行调度配置。FineDa[阅读全文:]
摘要:1. 概述1.1 版本说明FineDataLink 版本功能变动1.7增加内置参数:${cyctime}、${workname.opresult}、${jobname.opresult}4.0.31)增[阅读全文:]
摘要:1. 概述本文介绍 FineDataLink 提供的可被简道云、FR、外部系统调用的定时任务相关接口。注1:接口调用说明请参见:调用定时任务相关接口说明;FR中调用接口示例请参见:FR模板调用定时任务接[阅读全文:]
摘要:1. 概述本文介绍 SparkSQL 中的日期函数语法。本文同时提供新增计算列公式写法和 SparkSQL 语法写法,用户可自行选择。2. 时间戳推荐使用FineDataLink 新增计算列中[阅读全文:]
摘要:1. 概述当用户设计好定时任务后,可以管理定时任务、监控任务运行状态和查看任务运行日志等。本文列举定时任务的常见运维操作。2. 前提条件已完成定时任务的创建、开发。详情请参见:数据开发概述3. 单个任务[阅读全文:]
摘要:1. 概述1.1 背景FDL和FineReport组合应用示例 中解决了跨数据库关联、复杂SQL导致报表前端加载缓慢、报表数据集无法被引用和关联,无法进行数据集的复用等问题。但是若用户在 Fi[阅读全文:]
摘要:1. 概述1.1 应用场景用户为保证数据安全,不希望直接将数据仓库账号开发给第三方使用,且拥有 FineDataLink 作为数据中台,想使用「数据服务」功能,统一分发数据给第三方使[阅读全文:]
摘要:1. 概述1.1 应用场景随着 FineDataLink 工程使用时间的增长,fine_dp_work_exec_record(记录定时任务的执行情况)表中的数据会不断积累,导致数据量逐渐增多。当数据量[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.4.2-4.0.29新建数据连接时,Hadoop Hive (HDFS) 和Hadoop Hive数据源,合并为Hadoop Hive[阅读全文:]
摘要:1. 概述配置 星环 TRANSWARP INCEPTOR 数据源、Hive 数据源 时,存在设置项 HDFS 地址。如下图所示:HDFS 地址介绍:是 Hado[阅读全文:]
摘要:1. 概述1.1 应用场景FineDataLink 支持连接 MySQL ,进行定时任务读写、管道任务读写和数据服务发布。2. 准备工作2.1 版本和驱动下载驱动,并将其上传至 FineDat[阅读全文:]
摘要:1. 并发数1.1 问题描述由于 FineDataLink 中定时任务需要占用内存和并发资源等,因此用户可能需要根据实际的使用情况进行任务调整。阅读此部分,你可以解决和理解如下问题:问题一:如何配置定时[阅读全文:]
摘要:1. 概述本文介绍「数据同步」设置写入方式或者使用「数据转换-DB表输出」设置写入方式时配置项说明。「写入方式」界面如下图所示:写入方式有三种:注1:不同数据库支持的写入方式有部分限制,具体请参见:定时[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动3.1-3.7「DB表输出」算子的「数据去向」Tab 中若选择「自动建表」,「字段映射」Tab 下可删除表字段、修改表字段展示顺序、修改表字段[阅读全文:]
摘要:使用限制FineDataLink 支持连接 HP Vertica ,进行定时任务读写。数据开发Vertica 数据库 新建主键时,SQL 语句示例如下:alter table KAR[阅读全文:]
摘要:1. 概述[helpvideo]5453[/helpvideo]1.1 版本FineDataLink 版本功能变动1.0-4.1.3脚本配置Tab下,数据源是 MySQL、Oracle、SQL[阅读全文:]
摘要:1. 概述API 作为现代软件开发的重要组成部分。它在企业、互联网和移动应用等领域都有着广泛的应用。比如:系统集成:企业可以使用API将各种不同的应用程序和服务集成起来,以满足业务需求。数据共享:企业可[阅读全文:]
摘要:1. 概述1.1 应用场景用户需要对阿里云产品进行数据监控,实时掌握服务器性能情况。由于阿里云服务器签名认证很复杂,官方文档仅提供代码形式来获取签名。比如python或者java,且由于代码是开源的,扫[阅读全文:]
摘要:1. 概述1.1 问题描述工程部署在Linux 系统中时,有时我们访问工程会遇到中文乱码。1.2 原因分析出现这个情况有多种原因:1)工程所在的Linux服务器,没有设置中[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.31)在 步骤流 中,右键点击节点连线,提供「无条件执行」、「成功时执行」、「报错时执行」的节点连线配置2)在 步[阅读全文:]
摘要:1. 什么是 APIAPI(Application Programming Interface)是一种允许不同软件组件之间相互通信、交换信息的工具,他提供了一种统一的、规范化的途径,开发者只需遵循这些建[阅读全文:]
摘要:1. 概述语法DATEDIF(文本/开始日期, 文本/结束日期, 单位)返回两个指定日期间的天数、月数或年数 参数1文本/开始日期开始日期:代表所指定时间段的初始日[阅读全文:]
摘要:1. 概述数据同步功能说明 中已介绍了「数据同步」节点的相关功能。本文以一个具体示例为您做介绍,演示从一个 MySQL 数据库的「产品」表的所有数据,抽取到另一个 MySQL 数据库中去。2. 操作步骤[阅读全文:]
摘要:1. 概述本文以 MySQL 数据同步为例,将 demotest 数据库中的「订单信息」、「库存信息」、「成本中心对照表」实时同步至 demo1 数据库中。2. 操作步骤2.1 准备工作需准备一个独立部[阅读全文:]
摘要:1. 概述为降低新手用户的学习成本, FineDataLink 帮助文档介绍了新手入门学习路径,帮助用户快速入门。2. 学习路径FineDataLink 支持「数据开发」、「数据管道」、「数据[阅读全文:]
摘要:1. 概述本文讲述如何使用 FDL 发布一个 API ,且发布后的 API 如何在 FDL 工程中调用。2. 操作步骤2.1 准备工作注:对外 Demo 平台上已准备好环境,可到 对外 Dem[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动-支持连接公有云版简道云的数据4.0.20支持连接独享版简道云的数据4.1.5.3私有部署支持使用TLS/SSL认证1.2 功能简介[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.27独立部署时支持将 FineDataLink 公共数据发布为 API 4.0.29支持将 BI SQL 数据集中的参数作为[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink版本功能变动4.0.28数据发布 API 参数支持配置必填/非必填1.2 应用场景用户想要在发布API 时,对 API 取数逻辑进行设置:未传指定参数,则省[阅读全文:]
摘要:1. 概述通过数据管道实时同步数据时,执行同步任务前,需要在数据源中进行一些配置,开启数据库日志并进行数据库权限设置,以便FineDataLink监听数据管道来源端的数据库日志变化,进行实时同步。本文为[阅读全文:]
摘要:1. 概述1.1 应用场景FineDataLink 支持连接 Microsoft SQL Server,进行定时任务读写、管道任务读写和数据服务发布。2. 准备工作2.1 版本和驱动下载对应的[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变更4.0.1.1「管理系统>智能运维>资源迁移」的资源导出 Tab 下,新增 ETL 任务的导出;资源导入 Tab 下,可导入 ET[阅读全文:]
摘要:1. 概述FineDataLink 配置了外接数据库后,工程每次启动时都需要连接外接数据库。如果直接修改外接数据库的账号密码,工程则无法成功连接外接库,导致启动失败。本文将简单介绍正确修改外接[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.5.3-1.2 应用场景FineDataLink 支持连接 SAP Sybase ASE 数据源进行定时任务读取。2. 使用[阅读全文:]
摘要:1. 概述[helpvideo]5450[/helpvideo]1.1 版本FineDataLink 版本功能变动3.3「数据转换」节点新增算子「比对删除」,可将来源表中删除数据的操作同步到目标表4.0[阅读全文:]
摘要:使用限制FineDataLink 管道任务对于 Oracle 数据源,需要开启所有补全级别的日志,参见Oracle环境准备,但是任何级别的补全日志都不补全 LOB 和 LONG 类型字段.因此[阅读全文:]
摘要:1. 概述1.1 版本说明FineDataLink 版本功能变动4.0.14-4.0.24FineDataLink 服务器本地和 FTP/SFTP 服务器中:支持批量读取同格式的 Excel[阅读全文:]
摘要:1. 概述由于FineDataLink适配的部分数据源,不支持UPDATE更新或者DELETE删除操作,所以在使用此类数据库时,FDL 的部分功能无法使用,当前在产品功能中进行设计体现。2. 定时任务目[阅读全文:]
摘要:任务开发配置数据连接详情请参见:配置ClickHouse数据源数据开发详情请参见:数据开发概述数据管道详情请参见:数据管道概述clickhouse 作为写入端时字段映射说明当向目标表写入数据时[阅读全文:]
摘要:1. 概述1.1 应用场景FineDataLink 支持连接 Presto,进行定时任务读取。2. 准备工作2.1 版本和驱动下载驱动,并将其上传至 FineDataLink,如何上传可参见:驱动管理&[阅读全文:]
摘要:1. 概述FineDataLink 支持连接Apache Impala,进行定时任务读取和数据服务发布。2. 准备工作2.1 版本和驱动下载驱动,并将其上传至 FineDataLink,如何上[阅读全文:]
摘要:1. 概述FineDataLink 支持 Informix 进行定时任务读写。2. 准备工作2.1 版本和驱动下载驱动包,并将其上传至 FineDataLink 中,如何上[阅读全文:]
摘要:1. 概述1.1 应用场景FineDataLink 支持连接 Oracle ,进行定时任务读写、管道任务读写和数据服务发布。2. 准备工作2.1 版本和驱动 支持的数据库版[阅读全文:]
摘要:1. 概述1.1 应用场景API 接口中每天有 20 多万的数据,若落库到同一张表中,随着时间该表数据不断累积,可能造成查询慢的问题。希望能按日期分表,每天创建一个新的数据表,保存该天数据。1.2 实现[阅读全文:]
摘要:1. 概述1.1 版本说明 FineDataLink 版本功能变动4.0.8-4.1.2定时任务和数据管道任务中,装载方式新增COPY装载,写入数据较多时提升写入速度1.2 应用场景FineD[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.3支持读取 PostgreSQL 数据库的分区表1.2 功能简介FineDataLink 支持使用 Postgre[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.27一个定时任务可设置多个执行频率「调度配置」界面优化4.0.30支持设置定时任务的调度依赖4.1.1依赖任务下拉框中,屏蔽成环任务4[阅读全文:]
摘要:1. 概述1.1 应用场景在对定时任务进行调度配置时,希望在周期性任务结束后,若任务执行失败,则给指定用户发送短信通知,进行提醒,此时即可使用短信功能。1.2 功能简介Fi[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.26新增「文件输出」算子,可将数据输出为 CSV 类型的文件4.0.30可将数据输出为 Excel 类型的文件4.1.4数据输出为 C[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.30支持设置定时任务的执行优先级4.1.1可为定时任务单独设置日志输出级别4.1.4提供确认、取消按钮:进行设置后,可保存、取消操作1[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.26新增「超时限制」和「失败重试」功能4.0.29可设置脏数据阈值,使任务具备一定容错性当出现脏数据时,及时通知用户;在任务运行完成后[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.27「调度配置」名称修改为「任务控制」4.1.4「任务控制」中的调度配置Tab,单独独立出来,为「调度计划」1.2 功能简介定时任务的[阅读全文:]
摘要:此功能4.1.4 之前的版本支持使用,4.1.4 以及之后的版本详情参见:负载分配1. 概述1.1 版本FineDataLink 版本功能变动2.0新增功能「资源控制」1.2 功能简介限制「数据平台」占[阅读全文:]
摘要:1. 概述定时任务开发完成后,可到「任务运维」界面查看定时任务运行情况、为多个/单个定时任务设置执行频率、为多个/单个定时任务设置事件调度、批量设置结果通知等。如下图所示:2. 索引功能点说明运行记录1[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.4支持设置节点时,选择运行到此处,便于查看上游配置结果和调试1.2 应用场景在调试过程中,需要更新从上游到这个节点的数据(这个节点有下[阅读全文:]
摘要:1. 概述FineDataLink 支持 IBM DB2 进行定时任务读写和管道任务读取。2. 准备工作2.1 版本和驱动 支持的数据库版本驱动包下载驱动&nb[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本系统运维插件版本功能变更4.0--4.0.8V1.4.51)「自定导出内存堆栈」支持选择导出内容:堆栈、histo、dump2)「自定导出内[阅读全文:]
摘要:1. 概述1.1 版本说明FineDataLink 版本功能变动4.0.9请求类型为POST时,「请求参数」支持传入XML格式数据对于GET与POST请求,支持输出XML格式数据,支持预览XML响应结果[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.3数据写入Hive、星环 TRANSWARP INCEPTOR数据库时,支持创建、写入分区表支持读取 Postgr[阅读全文:]