摘要:邮箱报错 535 Error: authentication failed问题描述:发送邮件失败,报错:535 Error: authentication failed解决方案:密码应该填写授权码,而不[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本4.0.281.2 应用场景SQL 注入是比较常见的网络攻击方式之一,它针对程序员编程时的疏忽,通过恶意的参数输入,让后台执行这段 SQL,[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能说明4.0.30-4.1.7.3交互优化1.2 应用场景开发人员希望能导出开发完成的定时任务给运维人员迁移到正式生产的工程上调度运行;FineDa[阅读全文:]
摘要:新建定时任务,前端报错:任务不存在,无法获取文件问题描述:新建定时任务,前端报错“任务不存在,无法获取文件”。解决方案:linux 环境缺乏中文语言包。在新建任务时,生成的dp文件为???.dp,导致任[阅读全文:]
摘要:1. 概述1.1 版本 FineDataLink 版本功能变动4.0.17支持Mysql 设置同步源表结构变化4.0.20.1支持SQL Server、Oracle 、GaussDB 200、[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink版本4.0.101.2 功能介绍FineDataLink 支持通过 RFC 接口调用 SAP 系统内已经开发好的函数,并将数据取出。在调用前需要首先建立 F[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.5.4数据来源 Tab 中,配置方式选择「选表」时,显示表备注1.2 功能简介本文介绍「数据同步」设置数据来源或者使用「数据转换-DB[阅读全文:]
摘要:数据服务模块咨询浏览器限制推荐使用谷歌和 Edge 浏览器最新版本,其他浏览器可能会有兼容问题。数据服务功能使用咨询SQL 相关4.0.28 之前版本:为了解决 SQL 防注入问题,FineDataLi[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.5.2字段映射处可在目标表字段中筛选出有异常的字段4.1.5.41)数据来源 Tab 中,配置方式选择「选表」时,「数据去向与映射」T[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.18集成部署 客户若未购买 FDL ,集成部署后的工程将屏蔽 FDL 功能入口,避免给客户带来困扰4.0.28新增数据服务注[阅读全文:]
摘要:版本 FineDataLink 版本功能变动4.0.23定时任务输入输出支持 Doris管道任务数据输出支持 Doris4.1数据服务支持 Doris 数据源4.1.7.22.0 版[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1-4.1.2支持多租户模式CDC(Change Data Capture),即数据变更抓取,通过为源端数据源开启CDC,FineData[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本FineBI6.0 版本功能变动4.0.27最低支持版本 6.0.12 JAR 2023-08-03-4.0.29最低支持版本&n[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本FineBI6.0 版本功能变动4.0.27最低支持版本 6.0.12 JAR 2023-08-03)-4.0.29最低支持版本&[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink版本功能说明4.0.20.1-4.0.30支持按照应用维度查看调用记录4.1对于API运维方和调用方,可在调用记录中对根据访问者IP和调用错误类型进行筛选同[阅读全文:]
摘要:1. 概述1.1 版本说明FineDataLink 版本功能变动4.0.27管道任务提示优化支持快速批量选择需要同步的数据表支持文件夹管理管道任务脏数据处理优化,支持对单表和多表生成的脏数据进行忽略、重[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink版本Nacos 版本4.0.272.x1.2 应用场景Nacos 是 Dynamic Naming and Configuration[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink版本功能变动4.0.20.1支持的API发布的数据库版本:MySQL、Oracle、PostgreSQL、SQLServer、Greenplum(包含并行装[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink版本功能变动4.0.20.1-4.0.28数据服务支持应用管理功能,支持以应用的方式分组管理API调用方:支持对「应用」的基础管理功能(新建、编辑、删除、管[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.18集成部署 客户若未购买 FDL ,集成部署后的工程将屏蔽 FDL 功能入口,避免给客户带来困扰4.0.28新增数据服务注[阅读全文:]
摘要:1. 概述数据服务提供数据共享能力,可以将加工、融合后的数据封装发布为规范化API接口数据,供外部系统调用,实现数据价值输出及共享开放。2. 约束限制当前仅支持FineDataLink独立部署版本使用。[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.15-4.1.6.3数据服务支持 KingbaseES1.2 应用场景FineDataLink 支持连接 Kingbase&[阅读全文:]
摘要:1. 版本FineDataLink版本版本更新4.1-2. 概念简介集群:英文名称为 cluster,通俗地说,集群是这样一种技术:它将多个系统连接到一起,使多台服务器能够像一台机器那样工作或者看起来好[阅读全文:]
摘要:1. 概述本文简单介绍各种部署方案,以供挑选。2. 注意事项FineDataLink 内置的数据库为 HSQL 数据库。HSQL 数据库不能多线程访问,集群环境、数据量较大可能会导致[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.6.1支持为「库表管理」功能分配授权权限1.2 应用场景超级管理员可以给予某个用户「库表管理」的授权权限,该用户将成为一个次级管理员。[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.6.1支持为「库表管理」功能分配使用权限1.2 应用场景管理员希望能为普通用户分配「库表管理」功能的使用权限,让普通用户可以在 FDL[阅读全文:]
摘要:使用限制FineDataLink 支持连接 GaussDB 200 ,进行定时任务读写、管道任务写入以及数据服务读取。GaussDB数据库不支持管道任务设置「目标端执行逻辑删除」。任务开发装载[阅读全文:]
摘要:使用限制无论是否配置「并行装载设置」项,在进行数据开发时,要注意大小写规范,最好是统一为大写格式,否则会出现报错;比如在进行数据查询时,将查询内容统一大小写或者将查询内容加引号。注:针对不同数据库的特性[阅读全文:]
摘要:1. 概述1.1 应用场景用户需要将简道云上传的附件根据保密安全规定做归档,同步至FTP服务器/本地/业务管理系统。客户有大量带有附件的简道云数据,同时需要做数据的查询需要用FR做,所以需要将简道云附件[阅读全文:]
摘要:1. 概述1.1 应用场景用户想要将 FTP/SFTP服务器/本地FineDataLink 工程中的文件输出至指定的业务系统 API 接口。1.2 实现思路使用「文件传输」节点,设置「文件来源[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.24-4.1.3数据写入星环 TRANSWARP INCEPTOR 数据库时,支持创建、写入分区表1.2 应用场景企业使用星[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink版本功能变动4.1.4-1.2 应用场景由于 FineDataLink 中定时任务、管道任务和数据服务运行都需要占用内存和并发资源等,因此用户可能需要根据实[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink版本功能变动4.0.20.1-4.0.28数据发布API支持GET请求方式4.1接口调用返回码优化1.2 应用场景本文介绍如何将 FineDataLink[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink版本功能变动4.0.20.1-4.0.28数据发布API的POST请求方式,额外支持x-www-form-urlencoded格式4.1接口调用返回码优化1[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink版本功能变动4.0.20.1-4.0.28数据发布API的POST请求方式,额外支持x-www-form-urlencoded格式4.1接口调用返回码优化1[阅读全文:]
摘要:1. 概述FineDataLink版本功能变动4.0.26「管道控制」步骤中,新增「失败重试」设置4.0.27脏数据阈值由某个任务在某次开始运行到结束运行的区间阈值变为任务自建立至今整体阈值4.0.28[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本4.1.5.21.2 应用场景用户在定时同步向目标库写入数据时,希望可以将单次当前来源端的所有数据,放到同一个事务内装载:要么都成功,正常提交事务,更[阅读全文:]
摘要:1. 版本版本功能变动4.0.23-4.0.27写入到 Doris 采用 stream load 导入方式,即把数据输出为 CSV 格式,然后再 load 进数据库里,但是如果来源端的字段或字[阅读全文:]
摘要:1. 概述1.1 版本版本4.0.24 FineDataLink 支持使用 StarRocks 数据源。2. 使用限制数据源使用说明详情参见:StarRocks数据源使用说明。3.[阅读全文:]
摘要:1. 概述1.1 版本说明 FineDataLink 版本功能说明4.0.10支持写入数据4.0.11支持读取数据1.2 应用场景FineDataLink 支持连接 Gbase 8A[阅读全文:]
摘要:1. 概述1.1 版本 FineDataLink 版本4.0.261.2 简介MaxCompute(之前称为 ODPS),是阿里巴巴通用计算平台提供的一种快速、完全托管的 GB/TB/PB 级[阅读全文:]
摘要:兼容说明内存限制4.1.4 版本升级前后「内存限制」变化如下:独立部署中如果设置了「内存限制」,此配置失效,若需要再次修改内存限制,请联系技术支持。集成部署中:如果用户升级前没配置「内存限制[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.4-FineDataLink 数据管道支持执行同步任务前,需要参考本文为用户赋予一些权限,为后续的数据同步做好准备。2. 用户赋权创建[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.4-CDC(Change Data Capture),即数据变更抓取,通过为源端数据源开启CDC,FineDataLink 数据管道可[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.4-1.2 应用场景在FineDataLink中,管理员希望将「负载管理」功能的使用权限分配给其他用户,让普通用户也可以进行负载管理设[阅读全文:]
摘要:1. 概述1.1 版本说明FineDataLink 版本功能变动4.1.3-1.2 应用场景为了便于用户在 FineBI 工程与 FineDataLink 工程各自独立部[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.3-1.2 应用场景需要使用 FineDataLink 取出 API 数据时,由于数据量限制或者接口响应时间,有时需要分页取数。1.2[阅读全文:]
摘要:1. 了解所需业务数据实际操作前,请先了解该项目背景下企业已有的业务数据及其数据格式,以及业务背景分析需要的目标数据。根据原始数据分析可获得的有效数据,并基于业务需求确认最终数据表结构。对于电商中的销售[阅读全文:]
摘要:1. 了解所需业务数据实际操作前,请先了解该项目背景下企业已有的业务数据及其数据格式,以及业务背景分析需要的目标数据。根据原始数据分析可获得的有效数据,并基于业务需求确认最终数据表结构。由于需要对某销售[阅读全文:]
摘要:1. 业务背景财务是企业发展的关键命脉,企业只有盘算清楚家底,才能打牢经济发展基础。财务数据表现是衡量一个企业发展是否良好的关键指标。通过有效利用财务数据能够帮助企业了解、控制费用、降低消耗,为企业目标[阅读全文:]
摘要:1. 数据采集将 EAS 系统和OA 系统存储的数据,通过数据开发-定时任务将数据同步至同一数据库。功能详情请参见:数据同步概述1.1 设置单个同步任务将系统的数据库通过[通用]配置数据连接接入 Fin[阅读全文:]
摘要:1. 概述1.1 版本运维平台版本功能变更V1.5.5-V1.5.6部署过程中,不再安装冗余组件promtailV1.6.01)单机部署时,若选择安装elasticsearch,同步安装filebeat[阅读全文:]
摘要:1. 概述1.1 版本运维平台版本功能变更V1.8.0-V1.9.0部署交互界面优化V1.10.0部署进度界面优化,细分展示镜像拉取和组件部署进度V1.11.01)项目名称限制放宽,新增支持英文大写、中[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink版本WebSphere 版本对应 JDK 版本4.0.26WebSphere8.5.5.11及以上版本JDK 1.8 且小版本需在 JDK8u102 以上2[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink版本WebLogic 版本对应 JDK 版本4.0.26 Weblogic12c 及以上JDK 1.8 且小版本需在 JDK8u102 以上2.[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink版本WebLogic 版本对应 JDK 版本4.0.26 Weblogic12c 及以上JDK 1.8 且小版本需在 JDK8u102 以上1.2[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink版本WebLogic 版本对应 JDK 版本4.0.26 Weblogic12.2.1.3 及以上JDK 1.8 且小版本需在 JDK8u102[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.19-4.0.23 API 配置中的 body 请求内容支持使用 Content-Type 为 form-data 和 x-[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.1.3新增「值替换」算子,可将字段的原值按照特定规则替换成新值1.2 功能简介新增「值替换」算子,可将字段的原值按照特定规则替换成新值。如[阅读全文:]
摘要:1. 概述1.1 版本版本功能变动4.0.20.1支持0.10.2以上的Kafka版本1.2 应用场景为了便于用户通过配置 Kafka 消费者的方式,实时从 Kafka 中取数。FineDataLink[阅读全文:]
摘要:版本说明Tomcat独立部署FDL安装包版本提升至 Tomcat 8.5.96。数据管道- GaussDB 200 装载方式 copy 写入,部分场景脏数据记录异常,此时直[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本4.1.21.2 应用场景当用户想要使用FineDataLink支持的数据源以外的其他的 JDBC 类型数据库作为 FineDataLink 中的定时[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink版本4.01.2 功能简介服务器部署一直都是比较繁重的运维操作。为了降低部署带来的较高成本,帆软提供FineOps运维平台,支持使用运维平台前端容器化部署单[阅读全文:]
摘要:1. 业务背景电商经营由于通常涉及多个自营店铺和其他各种分销店铺,销售渠道链路长、各类数据繁杂零碎,数据监控和取用相对困难,因此对数据的管理和整合就显得非常重要。x电商公司在数据的整合和管理方面,主要遇[阅读全文:]
摘要:1. 概述通过数据管道实时同步 PostgreSQL 的数据时,来源数据源为 PostgreSQL,执行同步任务前,需要参考本文在数据源中进行一些配置,为后续的数据同步做好[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.26-4.0.28数据服务设置项修改为数据服务API1.2 应用场景管理员希望能为普通用户分配「数据服务」中指定的 API[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.28-1.2 应用场景管理员希望能为普通用户分配「数据服务」中指定的应用列表的查看和编辑权限。本文将介绍管理员如何给用户分配数据服务应[阅读全文:]
摘要:参数赋值节点来源表:FILL_OPERATION_GZ:自己造个表就行MID_FYFX_DETAILwith AA as (--杭州公司需要分摊的成本中心selectorg.fid,org.fnumbe[阅读全文:]
摘要:FILL_MANAGE_ITEM做了个数据比对来源表、目标表,数据比对,数据输出来源表:MID_FYFX_HZPROP:fill_dim_unit:全部数据fill_manage_item:部分数据目标[阅读全文:]
摘要:1. 概述本文介绍如何在 Linux 系统中手动配置标准集群。1.1 版本FineDataLink 版本功能变动4.0.27数据开发支持集群4.0.30数据管道、数据服务支持集群2. 准备步骤手动配置标[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能说明4.0.30-1.2 应用场景开发人员希望能导出开发完成的API任务给运维人员迁移到正式生产的工程上运行;FineDataLink 工程上做好[阅读全文:]
摘要:1. 业务背景超市等零售行业对卖场效率等要求越来越高,因此提升客户体验,同时如何快速扩充门店、智能化经营也是当前的主要目标。零售企业的数据量普遍较大,高速增长的数据量和高时效性要求,需要强大的业务系统和[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能说明4.0.30-1.2 应用场景开发人员希望能导出开发完成的管道任务给运维人员迁移到正式生产的工程上调度运行;FineDataLink 工程上做[阅读全文:]
摘要:1.背景对于零售公司,不同门店经常会上新多种商品,此时就想要知道哪些门店上哪些新品在销售上是成功的,哪些是失败的,从而进行及时监控,便于货品调度和推广。因此当前希望能实现对新商品销售的效果监控,业务人员[阅读全文:]
摘要:1. 概述本文介绍如何在 Linux 系统中手动配置高可用集群。2. 准备步骤手动配置高可用集群之前,请先提前准备好以下内容。操作步骤说明1准备服务器环境准备工程节点+负载均衡+状态服务器+文件服务器+[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink版本Nacos 版本4.0.272.x1.2 应用场景本文简单介绍如何在Linux系统安装 Nacos集群,并配置Nacos 中基础集群[阅读全文:]
摘要:1. 概述本文简单介绍 FineDB 数据库中包含的表字段说明。注:由于外接数据库的类型不同,字段的数据类型不完全一致,本文以工程内置数据库为例,用户需自行匹配。1.1 表列表分类子分类表名简介权限控制[阅读全文:]
摘要:1. 概述1.1 应用场景用户业务系统订单表包含:订单ID、订单金额、订单交易日期、订单创建日期。正常情况下「订单交易日期」和「订单创建日期」在同一天,但可能会存在业务人员补录订单的情况,比如原本 9.[阅读全文:]
摘要:1. 概念1.1 Redis 集群原理1)Redis 集群结构:N 个平权主节点(master),每个主节点对应 M 个从节点(slave)。注:因为投票机制,N 须为奇数。必须要 3 个或以[阅读全文:]
摘要:1. 概述Nginx 可以用来作为反向代理服务器,来提供负载均衡的能力,使我们的 Web 服务器,能够水平扩容,从而处理更多的用户请求,但是反向代理服务器又变成了一个单点,当反向代理服务器挂了,整合 W[阅读全文:]
摘要:文件输入/输出问题解决方案txt 行转列自己演示对应操作。需要拆分表,再合并宋睿[阅读全文:]
摘要:月团新碾瀹花瓷,饮罢呼儿课楚词。风定小轩无落叶,青虫相对吐秋丝。让我们来看看 2023 年 8 月,FineDataLink 给大家的惊喜吧~产品新功能数据服务可通过应用管理 API基于多客户(客户的客[阅读全文:]
摘要:1. 概述1.1 版本说明版本功能变动4.0.13支持备份和还原定时任务1.2 应用场景为了保证系统升级和其他资源的安全性,需要对系统进行备份。在日常开发过程中,希望单个或整体定时任[阅读全文:]
摘要:1. 概述1.1 版本 FineDataLink 版本功能变动4.0.28-1.2 简介TiDB 是一款同时支持在线事务处理与在线分析处理 (Hybrid Transactional and[阅读全文:]
摘要:1. 概述1.1 版本 FineDataLink 版本功能变动4.0.28-1.2 应用场景Amazon Redshift 是 AWS 提供的 MPP 架构数仓产品,用户需要 FineData[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本安全漏洞声明4.0公示23年护网及历史版本漏洞&解决方案:安全漏洞声明1.2 应用场景为了提升产品的安全性,本文整理了,正式工程中应当开启的相[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.26-4.0.28数据服务设置项修改为数据服务API1.2 应用场景超级管理员可以给予某个对象「API 任务」的授权权限,使该对象将成[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变动4.0.28-1.2 应用场景超级管理员可以给予某个对象数据服务「应用」的授权权限,使该对象将成为一个次级管理员。次级管理员可以给下级成员分配[阅读全文:]
摘要:1. 概述在进行数据发布时,用户需要配置好发布环境,也就是设置当前API发布后,外部系统调用是否需要是否开通黑白名单,以保证发布的 API 接口在被外部系统调用时更安全。2. 操作步骤2.1 设置黑白名[阅读全文:]
摘要:1. 概述1.1 版本版本功能变动4.0.20.1支持0.10.2到3.4的Kafka版本4.0.27交互体验优化1.2 应用场景用户需要将存在 Kafka 中的数据实时取出同步到数据库,并使用取出的数[阅读全文:]
摘要:1. 概述本文介绍如何在 Windows 系统中配置集群。2. 操作步骤2.1 基础环境准备部署集群之前,请确保已准备好集群工程所需的环境:集群环境准备2.2 部署 FineDataLink 工程各集群[阅读全文:]
摘要:1. 概述1.1 版本WebSphere 版本WebSphere8.51.2 应用场景1)为了方便使用,用户可能需要更改服务器的端口号,而不是使用服务器的默认端口号。2)Java 应用程序运行过程中会使[阅读全文:]
摘要:1. 概述1.1 版本WebLogic 版本 Weblogic12.2.1.3 及以上1.2 应用场景1)部署好 WebLogic 之后,如果服务器下运行程序过多且内存默认值太小,可能导致内存[阅读全文:]
摘要:1. 概述报表服务器版本FineDataLink 版本2021.08.26-2021.12.15 使用tomcat部署的工程,需要10.0的server.xml2022.01.19-今 无需server[阅读全文:]
摘要:1. 概述1.1 版本FineDataLink 版本功能变更4.0-1.2 应用场景若 FineDataLink 工程需要迁移服务器,服务器的 Mac 地址不同,此时需要进[阅读全文:]
摘要:1. 概述有时数据可能不仅仅会有新增,还可能会有修改、删除,这时候我们希望能够对数据进行比对更新,保证数据的变化同步到目标表中。4.0.18 及之后版本,「数据转换」节点移除「比对删除」算子,新增「数据[阅读全文:]
摘要:1. 应用场景数据库中存在两张表,其中数据「来源表」每天会更新、删除、新增。希望数据来源表数据变化后,「目标表」也随之更新,与数据来源表的数据保持一致。例如:数据来源表「出入库信息」,昨天新增两条数,序[阅读全文:]
摘要:1. 概述1.1 版本说明FineDataLink 版本功能变动4.0.14-1.2 应用场景为了便于用户从 FTP/SFTP 服务器上读取 Excel 和 CSV 文件数据并在 FDL 中进[阅读全文:]
摘要:1. 概述1.1 版本说明FineDataLink 版本功能变动4.0.14-4.0.24文件存放目录由%FDL%/webroot/WEB-INF/local_files/更新为%FDL%/w[阅读全文:]
摘要:1. 概述用户希望可以在当前任务中调用其他任务,直接设置任务间执行的依赖关系,「调用任务」节点可满足该需求。本文介绍调用任务节点的功能范围及注意事项。2. 日志说明日志逻辑示例调用任务仅展示调用节点的执[阅读全文:]