我创建的文档 我编辑的文档 我收藏的文档
- 定时任务数据源功能限制说明
- 文档创建者:Wendy123456
- 标签:
-
摘要:1. 概述由于FineDataLink适配的部分数据源,不支持UPDATE更新或者DELETE删除操作,所以在使用此类数据库时,FDL 的部分功能无法使用,当前在产品功能中进行设计体现。2. 定时任务目[阅读全文]
- 创建时间: 编辑: | 浏览:
- 4.0.1更新日志
- 文档创建者:Wendy123456
- 标签:
-
摘要:4.0.1.1 版本新增功能1)数据输出适配 Impala。2)「管理系统>智能运维>资源迁移」的资源导出 Tab 下,新增 ETL 任务的导出;资源导入 Tab 下,可导入 ET[阅读全文]
- 创建时间: 编辑: | 浏览:
- FineDataLink介面介紹
- 文档创建者:Wendy123456
- 标签:
-
摘要:1. 概述1.1 版本FineDataLink 版本功能變動1.6現在資料夾永遠顯示在任務上方4.0.29定時任務節點視覺效果優化4.1.11.1「主頁」合到「維運中心」中,更名為「維運概覽」1.2 功[阅读全文]
- 创建时间: 编辑: | 浏览:
- 来源表数据增删改同步至目标表
- 文档创建者:Wendy123456
- 标签:
-
摘要:1. 应用场景数据库中存在两张表,其中数据「来源表」每天会更新、删除、新增。希望数据来源表数据变化后,「目标表」也随之更新,与数据来源表的数据保持一致。例如:数据来源表「出入库信息」,昨天新增两条数,序[阅读全文]
- 创建时间: 编辑: | 浏览:
- 每天获取Excel昨日新增数据导入数据库
- 文档创建者:Wendy123456
- 标签:
-
摘要:1. 概述1.1 预期效果Excel 数据表为源数据表,每天会新增数据,用户希望数据库中的某张表自动新增 Excel 里面昨天新增的数据。1.2 实现思路Excel 数据集作为要输入的数据,使用&nbs[阅读全文]
- 创建时间: 编辑: | 浏览:
- 多张Excel表数据关联后再进行加工计算
- 文档创建者:Wendy123456
- 标签:
-
摘要:1. 概述1.1 预期效果用户有两张表,存在不同的数据库中,表数据包含姓名和科目成绩,想要这两张表合并为一张表,且新增一列为科目成绩的总和,将最终数据输出到指定数据库中。1.2 实现思路先将两张成绩表通[阅读全文]
- 创建时间: 编辑: | 浏览:
- 自动建表功能
- 文档创建者:Wendy123456
- 标签:
-
摘要:[阅读全文]
- 创建时间: 编辑: | 浏览:
- 字段设置
- 文档创建者:Wendy123456
- 标签:
-
摘要:1. 概述1.1 版本FineDataLink 版本功能变更3.7「数据转换」节点下新增「字段设置」功能,可实现数据流字段的选择、重命名、数据类型转换操作4.1.5.3支持批量删除和还原字段,详情参见本[阅读全文]
- 创建时间: 编辑: | 浏览:
- FineDataLink支援的資料源
- 文档创建者:Wendy123456
- 标签:
-
摘要:1. 版本FineDataLink 版本功能變動1.5數據輸入适配 API4.2.0.3針對 OceanBase(Oracle模式)數據源:定時任務支持讀取和寫入管道任務支持寫入庫表[阅读全文]
- 创建时间: 编辑: | 浏览:
- SparkSQL语法概述
- 文档创建者:Wendy123456
- 标签:
-
摘要:1. 概述1.1 版本FineDataLink 版本功能变更3.6.2数据转换节点 新增算子「Spark SQL」算子,可实现较灵活的数据转换功能4.0.17「Spark SQL」算子支持使用[阅读全文]
- 创建时间: 编辑: | 浏览:
- 数据关联
- 文档创建者:Wendy123456
- 标签:
-
摘要:1. 概述[helpvideo]8612[/helpvideo]1.1 版本FineDataLink 版本功能变更3.1「数据转换」节点新增算子「数据关联」1.2 应用场景用户两张数据表在不同的数据库中[阅读全文]
- 创建时间: 编辑: | 浏览:
- FineDataLink词汇表
- 文档创建者:Wendy123456
- 标签:
-
摘要:1. 概述本文对 FineDataLink 的特有概念进行解释说明,以便用户进行使用。2. 功能模块名称包含数据开发、数据管道、数据服务、任务运维等功能,满足用户对数据进行同步、处理、清洗等一[阅读全文]
- 创建时间: 编辑: | 浏览:
- 4.0.1版本之前更新日志
- 文档创建者:Wendy123456
- 标签:
-
摘要:3.7.1 版本1)数据输出适配 clickhouse 。详情请参见:数据转换节点2)3.7.1 版本之前,「参数赋值」可以将取到的数据输出为参数,被下游连线节点使用,不允许跨节点使用。3.7[阅读全文]
- 创建时间: 编辑: | 浏览:
- 消息通知
- 文档创建者:Wendy123456
- 标签:
-
摘要:1. 概述[helpvideo]8629[/helpvideo]1.1 版本FineDataLink 版本功能变动3.6.1新增节点「消息通知」,可将任务调度结果以企业微信群机器人的形式通知给指定用户4[阅读全文]
- 创建时间: 编辑: | 浏览:
- 数据仓库搭建方案二
- 文档创建者:Wendy123456
- 标签:
-
摘要:1. 概述1.1 问题描述很多客户希望采用FineDataLink搭建数据仓库,数据仓库中ETL任务的调度配置是非常关键的一方面。我们希望数仓层级中的ODS层、DW层和DM层,层层相关,并且每个层级的E[阅读全文]
- 创建时间: 编辑: | 浏览:
- 使用条件分支获取优秀员工信息
- 文档创建者:Wendy123456
- 标签:
-
摘要:1. 概述1.1 应用场景公司每月定期对员工销量总和进行计算,若销量总和大于 500,则筛选出销售量大于平均值的员工信息,写入优秀员工信息表,进行表扬嘉奖。若销量总和小于 500 则筛选出销售量小于平均[阅读全文]
- 创建时间: 编辑: | 浏览:
- 更新目标表部分字段
- 文档创建者:Wendy123456
- 标签:
-
摘要:1. 概述1.1 应用场景将来源表的数据更新到目标表时,将部分字段进行比对,只更新这些字段的数据。1.2 实现思路根据比对字段更新目标表指定字段的思路:来源表有数据新增:目标表中插入新增数据来源表有数据[阅读全文]
- 创建时间: 编辑: | 浏览:
- 数仓拉链表(来源表数据小于10000)
- 文档创建者:Wendy123456
- 标签:
-
摘要:1. 概述1.1 应用场景在实际业务场景中,做数据增量更新的时候,有时候会碰到以下情况:当表数据很大时,每次更新只有很小一部分数据,如果只保留一张全量表,则无法查询历史某个时间段表的全量记录。如果每天都[阅读全文]
- 创建时间: 编辑: | 浏览:
- 定时任务授权权限
- 文档创建者:Wendy123456
- 标签:
-
摘要:1. 概述1.1 版本FineDataLink 版本功能变动V1.5.2-4.0.9「ETL任务管理」优化为定时任务管理1.2 应用场景超级管理员可以给予某个对象「定时任务」的授权权限,使该对象将成为一[阅读全文]
- 创建时间: 编辑: | 浏览:
- 定时任务管理权限
- 文档创建者:Wendy123456
- 标签:
-
摘要:1. 概述1.1 版本FineDataLink 版本功能变动V1.5.2-4.0.9「ETL任务管理」优化为定时任务管理4.0.14定时任务权限提示优化,详情参见本文 2.2 节1.2 应用场景管理员希[阅读全文]
- 创建时间: 编辑: | 浏览: