摘要:1. 概述在进行数据处理时,数据的截取、合并必不可少。数据中有字段结构为用某些分隔符连接起来的字符串,使用时需要拆分开只提取固定位置的字符串,或者整体拆分为多列。FineDataLink 支持使用「新增[阅读全文:]
摘要:1. 概述语法DATETONUMBER(文本/日期时间)返回自1970年1月1日00:00:00GMT经过的毫秒数。 参[阅读全文:]
摘要: 1. 概述语法FIND(文本1, 文本2, 索引)从指定的索引处开始返回第一次出现的指定子字符串文本1在此字符串文本2中的索引(传入字符找位置) &n[阅读全文:]
摘要:1. 概述语法LOWER(文本)将所有的大写字母转化为小写字母 参[阅读全文:]
摘要:1. 概述语法UPPER(文本)将文本中所有的字符转化为大写 参数1文本需要转化为大写字符的文本  [阅读全文:]
摘要:1. 概述语法LEFT(文本, 字符数)根据指定的字符数返回文本串中的第一个或前几个字符 参数1文本要求「字符数」值必须[阅读全文:]
摘要:1. 概念语法MID(文本, 起始位置, 字符数)将文本串从指定位置返回一定数目的字符 参数1文本包含要提取字符的文本串[阅读全文:]
摘要:1. 概述语法RIGHT(文本, 字符数)根据指定的「字符数」从右开始返回「文本」中的最后一个或几个字符 [阅读全文:]
摘要:1. 概述语法CODE(text)计算文本串中第一个字符的数字代码。返回的代码对应于计算机使用的字符集。 参数text需要计算第一个字[阅读全文:]
摘要:1. 概述语法CHAR(数值)根据指定数字返回对应的字符。CHAR函数可将计算机其他类型的数字代码转换为字符。 参数1number指定[阅读全文:]
摘要:1. 概述1.1 应用场景用户需要需要根据某些条件对数据进行分类赋值处理,形成新增列,此时 IF 函数是一个比较好的选择。1.2 实现思路通常 IF 函数会与 AND、OR、FIND等嵌套使用。2. 示[阅读全文:]
摘要:1. 概述FineDataLink 中的 SparkSQL 支持使用窗口函数。窗口函数是一种分析型的OLAP函数。窗口函数与聚合函数的功能相似,两者都可以对指定数据窗口进行统计分析,但窗口函数与聚合函数[阅读全文:]
摘要:1. 概述模糊查询和筛选区别于精确搜索,搜索系统自动按照用户输入关键词对文本类型的字段进行检索,得到某个范围内的值。类似于 SparkSQL 语句中的 Like 。FineDataLink 通过更简便的[阅读全文:]
摘要:1. 概述在进行数据处理时,经常需要对数据进行排序,本文来介绍如何在 FineDataLink 中使用 Spark SQL 进行排序。2. 全局排序使用「Spark&nbs[阅读全文:]
摘要:1. 应用场景数据库中存在两张表,其中数据「来源表」每天会更新、删除、新增。希望数据来源表数据变化后,「目标表」也随之更新,与数据来源表的数据保持一致。例如:数据来源表「出入库信息」,昨天新增两条数,序[阅读全文:]
摘要:1.概述1.1 预期效果用户有时需清洗掉数据中的一些不需要的字符。例如,括号型(负数),特殊货币符号(¥),千分位(数值型自带千分位)等,如下图所示:1.2 实现思路先用 left 函数截取第一位返回值[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变更4.0-1.2 功能简介对 FineDataLink 工程中的每个目录进行梳理,明确可以清理的内容以及可以清理的范围。对&[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本4.01.2 应用场景随着工程运行时间的不断增加,工程占用的内存也不断增大,用户往往焦虑哪些文件可以清理呢?1)很多处于中间形态的最终没有用[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本4.01.2 功能简介磁盘使用情况分析,是对磁盘常用目录的增减情况进行监控,用于进行磁盘异常预警。2. 磁盘使用情况分析管理员登录 [阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本4.01.2 功能简介对磁盘使用过程进行监控,发现增长异常时及时进行预警。2. 监控预警设置管理员登录 FineDataLink [阅读全文:]
摘要:1. 概述管理员登录 FineDataLink ,点击「管理系统>系统管理」,或者浏览器访问http://IP:端口号/工程名/decision#management/system/lo[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变更4.0-1.2 功能简介管理员登录 FineDataLink ,点击「管理系统>系统管理」,在「常规」 T[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本4.01.2 应用场景本文将介绍在单机环境下,如何配置 WebSocket 端口。注:FineDataLink 工程支持容器 Websock[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变更4.0-1.2 应用场景超级管理员给「部门/角色/人员」分配「人员管理」的管理权限,被赋予权限的对象将[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变更4.0-1.2 应用场景超级管理员给「部门/角色/人员」分配「人员管理」的授权权限,被赋予权限的对象将[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink版本4.01.2 应用场景FineDataLink 工程若部署在内网环境下,某些需要外网的场景功能无法使用。本文将简单介绍部分功能需要开通的外网端[阅读全文:]
摘要:1. 概述在 FineDataLink独立部署完成以后,进入安装目录可以看到安装文件。FineDataLink 安装文件本质上就是一个 Tomcat 。本文详细介绍安装目录结构。2. 安装根目[阅读全文:]
摘要:1. 版本1.1 版本FineDataLink 版本同步LDAP域插件版本功能变更4.0V2.0-1.2 应用场景用户希望从 LDAP 服务器中同步用户,但是需要把 LDAP 服务器中的数据转[阅读全文:]
摘要:1. 售前咨询当您需要购买咨询时,您可以直接致电销售人员,咨询热线:「400-811-8890」转 1 ,将会有专属客户经理为您提供专业的解决方案及产品报价。同时,您也可以在 Fin[阅读全文:]
摘要: 春来到,百草纵,万象更新新一年。让我们来看看 2023 年 2 月 FineDataLink 的更新~产品新功能数据比对通过数据比对+DB表输出(写入方式选择插入/更新/删除数据)的组合方式[阅读全文:]
摘要:2023年 3 月是 FineDataLink 快速更新迭代的一个月。产品新功能产品学习路径最佳实践上新干货满满,快来了解一下吧~产品新功能新增API输出用户可将多应用系统的数据通过FDL打通,实现业务[阅读全文:]
摘要:2023年 4 月 FineDataLink 继续为您带来新功能和物料。产品新功能产品学习路径最佳实践上新产品新功能数据连接优化数据开发、数据管道选择数据来源时支持测试数据连接是否正常,进行数据开发时更[阅读全文:]
摘要:1. WebSocket 连接失败现象1)管理员登录 FineDataLink 数据平台,点击「管理系统>数据连接」,进入数据连接编辑界面,可能存在多人同时编辑同一个数据连接的情况。顶部[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变更4.0-1.2 功能简介用户登录 FineDataLink 时,平台会对输入的用户名和密码进行验证,以确保 Fi[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变更4.0-1.2 功能简介FineDataLink 支持 HTTP 认证方式。本文介绍如何在 [阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本4.01.2 应用场景用户在 LDAP 认证服务器存储了较为完整的员工信息,且已经使用它进行了多个线上系统的认[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变更4.0-1.2 功能简介FineDataLink 可在添加用户或重置用户密码后 ,通过邮件通知实现以下场景:自动通知用户账号、初始密[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本多域LDAP认证插件版本功能变更4.0V1.0-1.2 应用场景员工信息存储在 LDAP 认证服务器中,且已经[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变更4.0-1.2 预期效果用户登录 FineDataLink 时,若不希望使用默认的登录界面,可通过自定义登录界面的方式修改[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变更4.0-1.2 功能简介管理员登录 FineDataLink ,点击「管理系统>系统管理」,在「[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变更4.0-1.2 应用场景用户忘记密码时,由于安全性考虑,希望通过某种身份验证后,例如手机验证或者邮箱验证,才能重[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变更4.0-4.0.16支持管理员自定义全局开关「保持登录」功能1.2 应用场景为了安全性考量,可以设置登录超时时间[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变更4.0-1.2 功能简介服务器注册后,如需获取技术支持服务,需提供凭证信息。2. 查看服务凭证工程注册成功后,管理员可在 FineD[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本4.01.2 应用场景当登录 FineDataLink 数据平台时,除了正常的登录流程外,[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变更4.0-1.2 应用场景部分用户出于安全性考虑,希望账号只能一处登录,帆软提供单一登录的设置。1.3 [阅读全文:]
摘要:新增功能数据开发1)「数据转换」节点中新增「新增计算列」算子,支持对常量、参数和其他字段进行公式计算或逻辑映射,将结果放到新的一列,参与后续运算或进行输出。详情请参见:新增计算列2)定时任务的读写支持&[阅读全文:]
摘要:尊敬的帆软用户: 感谢您一直以来对帆软软件的关注和支持,为了给您提供更高品质的服务,面向FineReport、FineBI、以及 FineDataLink 的合作[阅读全文:]
摘要:1. 概述若FineDataLink工程任务或配置发生误删、误改和虚拟机丢失等特殊情况时,对FDL开发任务的恢复方法。2. 使用限制FineDataLink 「数据管道」不支持备份还原。3. 备份3.1[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动3.4支持复制单个或多个节点1.2 应用场景用户在设计定时任务时,想复用之前任务中设计好的某个节点,不想做重复开发。想单独测试某个已经开发好的[阅读全文:]
摘要:1. 概述用户希望可以在当前任务中调用其他任务,直接设置任务间执行的依赖关系,「调用任务」节点可满足该需求。本文介绍调用任务节点的功能范围及注意事项。2. 日志说明日志逻辑示例调用任务仅展示调用节点的执[阅读全文:]
摘要:1. 版本FineDataLink版本4.0.222. 数据开发定时任务运行日志由原来的 http 请求获取改为 websocket 推送的方式,提高了日志推送效率。3. 管理系统3.1 登录页设置优化[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本清新风格插件版本4.0V1.0.61.2 应用场景若不想使用 FineDataLink 的默认登录界面,可选择安装清新风格插件,切换成清新风格的登录界[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变更4.0.1.1「管理系统>智能运维>资源迁移」的资源导出 Tab 下,新增 ETL 任务的导出;资源导入 Tab 下,可导入 ET[阅读全文:]
摘要: 1.索引更新文档更新时间报错或异常概览数据同步常见报错2022.11.281.1 任务日志界面报错脏数据1.2 任务日志界面报错填写的参数值不[阅读全文:]
摘要:1. 版本FineDataLink版本4.0.212. 数据连接管理优化1)FineDataLink 独立部署版本, 「管理系统>数据连接>数据连接管理」处,屏蔽不支持的数据源类型,避免对用[阅读全文:]
摘要: 1. 版本FineDataLink版本4.0.20.12. 数据管道2.1 支持读取Kafka数据源支持实时同步读取 Kafka 数据,转换成 JSON 格式数据并将其解析成二维表[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink版本4.01.2 问题描述用户修改 FineDataLink 系统登录页的登录方式为「设置登录网页」后,由于自定义 HTML 存在错误,[阅读全文:]
摘要:1. 背景1.1 现状「小数公司」的人事部门率先搭建了「报表OA系统」作为人事任务流程,将人事工作标准化、流程化,非常适合小数公司目前的人事工作现状。而行政部门新采购了简道云应用进行业务的规范化流转,通[阅读全文:]
摘要:1. 版本FineDataLink版本4.0.192. 数据开发2.1 新增数据过滤功能当用户在进行空值、重复值过滤、或是想要筛选出符合目标的值以进一步处理时,可以直接使用「数据转换」中的数据[阅读全文:]
摘要:1. 概述数仓调度场景案例给出了整体的调度方案,本文将为你介绍如何设置 ODS 层任务。设置 ODS 层任务需要将来自接口数据的「财务数据」和存储在固定数据库的「销售数据」通过 FineDataLink[阅读全文:]
摘要:1. 概述API 入门详情参见:API入门1.1 应用场景有时用户需要先获取 Token 或者某个指定数据,然后再根据 Token 从指定 API 中取出 JSON 类型数据。例如我们想要通过[阅读全文:]
摘要:1. 概述API 入门详情参见:API入门1.1 应用场景有时用户需要先获取 Token 或者某个指定数据,然后再根据 Token 从指定 API 中取出非 JSON 类型数据。比如我们想要通过 API[阅读全文:]
摘要:1. 版本FineDataLink版本4.0.182. 数据管道2.1 实时同步支持Oracle18c、19c、Oracle RAC集群读取管道任务读取端适配Oracle18c、19c、Oracle R[阅读全文:]
摘要:1. 概述数仓调度场景案例给出了整体的调度方案,本文将为你介绍如何设置 DM 层任务。DM 层使用更新的数据进行数据处理,将 DW层的销售数据和财务数据进行关联,合并成宽表并输出至指定数据库,为其他报表[阅读全文:]
摘要: 长路浩浩荡荡,万物尽可期待,轻轻的和 2022 说声再见,拥抱 2023让我们来看看2022年最后一个月,FineDataLink 带给大家的更新吧~产品新功能行转列在使用 FineData[阅读全文:]
摘要:1. 版本FineDataLink版本4.0.172. 数据管道2.1 实时同步支持同步源表结构变化在使用管道任务进行数据实时同步过程中,来源端结构可能因业务调整等原因发生变动,如增删表、增删字段、修改[阅读全文:]
摘要:1. 版本FineDataLink版本4.0.162. 数据管道2.1 数据管道目标数据支持选择已存在表在使用 FineDataLink 进行实时同步过程中,用户想要自己在数据库建表后再进行同[阅读全文:]
摘要:1. 概述1.1 版本说明FineDataLink 版本功能变动4.0.17新增「样本设置」功能预览数据量默认显示 1000 行,同时支持显示字段数据类型1.2 应用场景在进行定时任务数据开发时,用户经[阅读全文:]
摘要:2022-12简介任务查看效果展示某企业现在需要将某业务工单数据全部取出以供业务分析使用。由于数据量比较大,不可能一次性取全量数据,因此需要使用参数。接口文档中 pageIndex [阅读全文:]
摘要:4.0.10 版本新增功能1)FineDataLink 支持通过 RFC 接口调用 SAP 系统内已经开发好的函数,并将数据取出。详情参见:SAP RFC 取数数据同步节点:数据转换节点:2)FineD[阅读全文:]
摘要:4.0.11 版本新增功能1)FineDataLink 对数据转换中 API 输入取 webservice 接口数据方式进行优化。在导入接口配置后,API 配置和 Headers、body 界面会自动生[阅读全文:]
摘要:4.0.12 版本优化功能1)FineDataLink 交互体验优化。构建数据仓库的场景下,数据管道通常用来做ODS层,数据开发通常用来做DWD、DWS层,因此将两个功能节点的位置对调,如下图所示:新建[阅读全文:]
摘要:1. 版本FineDataLink版本4.0.152. 数据开发2.1 数据转换支持行转列在使用 FineDataLink 进行 ETL 开发过程中,如果数据是一维表,想要通过行转列,将一维表[阅读全文:]
摘要:4.0.14 版本注1:当前版本 驱动管理 配置项调整为默认开启,允许从驱动管理直接上传驱动Jar,即 finedb 的SystemConfig.driverUpload参数值为tr[阅读全文:]
摘要:4.0.13 版本新增功能1)FineDataLink 数据开发新增「参数输出」功能,能够对数据进行复杂处理后直接输出参数,不需要将处理结果输出数据库在从数据库取值作为参数。详情参见:参数输出2)Fin[阅读全文:]
摘要:1. 概述1.1 问题描述在服务器启动后,系统默认的登录地址为http://localhost:8068/decision,默认端口号为 8068,但有时用户可能在一个服务器上同时部署多个工[阅读全文:]
摘要:4.0.8 版本新增功能1)支持通过 Shell 脚本在 FineDataLink 中调用Kettle任务、调用Python计算任务,或者进行数据库备份还原等操作。详情参见:Shell脚本2)数据开发支[阅读全文:]
摘要:4.0.7 版本新增功能1)数据管道实时同步支持 SQL Server 读取和写入数据。数据管道功能详情参见:数据管道概述2)数据管道实时同步支持 Oracle 读取数据,[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink版本4.0.6.11.2 功能说明FineDataLink 支持通过安装包,直接部署在主流操作系统上。1.3 部署步骤部署步骤如下图所示:2. 前提条件部署[阅读全文:]
摘要:1. 概述数仓调度场景案例给出了整体的调度方案,本文将为你介绍如何设置总的数仓调度任务。三个层级的数仓都已经设置完成,接下来就可以将 ODS、DW、DM 层的调度任务进行组合,通过调用任务的形式组合在一[阅读全文:]
摘要:1. 版本FineDataLink 版本功能变更3.4新增复制、粘贴、删除、移动画布快捷键4.0.2新增保存、全选、撤销、还原快捷键4.0.6任务设计区域展示所有快捷键新增调整画布大小快捷键2. 功能介[阅读全文:]
摘要:4.0.5 版本新增功能1)新增「数据管道」功能, 支持对 MySQL 数据源进行单表、多表、整库数据的实时全量和增量同步,可以配置实时同步任务。详情请参见:配置数据管道任务2)新增「管道任务[阅读全文:]
摘要:1.数据连接1.1 客户在新建SQL Server的数据连接后,可能会在数据同步等节点出现无数据连接的情况,如下图所示:操作说明: SQL Server的数据连接模式需要和数据库模式所对应,一[阅读全文:]
摘要:3.7.1 版本1)数据输出适配 clickhouse 。详情请参见:数据转换节点2)3.7.1 版本之前,「参数赋值」可以将取到的数据输出为参数,被下游连线节点使用,不允许跨节点使用。3.7[阅读全文:]
摘要:4.0.3.1 版本新增功能1)新增「循环容器」节点,满足多个节点循环执行的场景。2)新增内置参数:${loopTimes},详情请参见:内置参数修复 BUG本节中附上了已修复的 BUG 编号,若客户对[阅读全文:]
摘要:1. 概述1.1 问题描述很多客户希望采用FineDataLink搭建数据仓库,数据仓库中ETL任务的调度配置是非常关键的一方面。我们希望数仓层级中的ODS层、DW层和DM层,层层相关,并且每个层级的E[阅读全文:]
摘要:4.0.2.1 版本新增功能1)数据连接新增简道云数据类型。如下图所示:2)数据转换 节点中新增「简道云输入」算子。如下图所示:修复BUG本节中附上了已修复的 BUG 编号,若客户对某个 BUG 有问题[阅读全文:]
摘要:1. 概述1.1 版本报表服务器版本ETL版本功能变动11.02.1目标数据库支持 SQLite 数据源,详情参见本文第 3 章1.2 准备工作本文介绍在使用 FineDataLink 之前的准备工作,[阅读全文:]
摘要:1. 概述1.1 应用场景将来源表的数据更新到目标表时,将部分字段进行比对,只更新这些字段的数据。1.2 实现思路根据比对字段更新目标表指定字段的思路:来源表有数据新增:目标表中插入新增数据来源表有数据[阅读全文:]
摘要: 测试[阅读全文:]