发短消息我创建的文档 我编辑的文档 我收藏的文档
- 数据处理-按编号和日期汇总顺序拼接数据
- 文档创建者：Roxy
- 标签：
-
摘要：1. 概述1.1 应用场景某公司的闸机系统会按照人员编号、通行门禁除、通信时间3个字段，记录每一个人员，经过每一处门禁，具体经过的时间。希望可以将原始通行明细数据，汇总成按：每人每天一条汇总通行详情，且[阅读全文]
- 创建时间： 编辑： | 浏览：
- API取数-获取美团企业版数据
- 文档创建者：Roxy
- 标签：
-
摘要：1. 概述1.1 应用场景用户需要将美团企业版的接口数据取出，例如希望将 订单列表查询 中的数据取出，如下图所示：而「美团企业版」的所有接口调用需要对请求参数进行加密，响应参数进行解[阅读全文]
- 创建时间： 编辑： | 浏览：
- 数据检测使用权限
- 文档创建者：Roxy
- 标签：
-
摘要：1. 概述1.1 版本FineDataLink 版本功能变动4.1.2.4-1.2 应用场景管理员希望能为普通用户分配「数据检测」中指定数据检测任务的查看和编辑权限。本文将介绍管理员如何给用户分配数据检[阅读全文]
- 创建时间： 编辑： | 浏览：
- 检测任务-校验联合主键唯一性
- 文档创建者：Roxy
- 标签：
-
摘要：1. 概述1.1 应用场景客户有数据表是存储客户合同信息的，需要检测主键唯一性，且该主键是多字段的联合主键。1.2 实现思路使用「数据检测」功能，创建检测规则，选择表级规则，并设置检测对象为「过滤行统计[阅读全文]
- 创建时间： 编辑： | 浏览：
- 检测任务-校验数据是否合法
- 文档创建者：Roxy
- 标签：
-
摘要：1. 概述1.1 应用场景客户有数据表，是存储公司联系人信息的，需要校验表字段：校验联系人手机号是否合法。1.2 实现思路使用「数据检测」功能，创建检测规则，选择字段级规则，并设置检测对象为「字段行统计[阅读全文]
- 创建时间： 编辑： | 浏览：
- 检测任务-校验主键唯一性
- 文档创建者：Roxy
- 标签：
-
摘要：1. 概述1.1 应用场景客户有数据表，是存储公司客户信息的，需要校验表字段：校验 FID （公司ID）主键唯一性。1.2 实现思路使用「数据检测」功能，创建检测规则，选择字段级，选择字段FI[阅读全文]
- 创建时间： 编辑： | 浏览：
- 解析并关联多个JSON数组字段（4.1.6.2及其后版本）
- 文档创建者：Roxy
- 标签：
-
摘要：注：本文方案适用于 4.1.6.2 之后版本。1. 概述1.1 应用场景用户的 JSON 数据中包含多个数组字段，如下图所示：希望解析数组字段，且解析后的字段一一对应。如下图所示：1.2 实现思路使用[阅读全文]
- 创建时间： 编辑： | 浏览：
- 全局清洗规则
- 文档创建者：Roxy
- 标签：
-
摘要：1. 概述1.1 版本FineDataLink 版本功能变动4.2.4.3-1.2 应用场景场景1：来源表中大量的表、字段都有同样的数据问题，需要统一设置清洗规则，将值匹配后替换；场景2：来源表敏感信息[阅读全文]
- 创建时间： 编辑： | 浏览：
- 实时任务运维
- 文档创建者：Roxy
- 标签：
-
摘要：1. 概述1.1 版本说明FineDataLink 版本功能变动4.2.1.1-1.2 应用场景在配置 实时任务任务后，希望对所有数据开发中的实时任务进行统一的管理。比如批量启动任务、删除任务[阅读全文]
- 创建时间： 编辑： | 浏览：
- Elasticsearch输入
- 文档创建者：Roxy
- 标签：
-
摘要：1. 概述1.1 版本FineDataLink 版本功能变动4.2.0.2-1.2 应用场景用户的业务数据库是 Elasticsearch 数据库，需要定时读取 Elasticsearch 数[阅读全文]
- 创建时间： 编辑： | 浏览：
- 数据分发-实时任务
- 文档创建者：Roxy
- 标签：
-
摘要：1. 概述1.1 版本FineDataLink 版本功能变动4.2.0.1-1.2 应用场景一条数据流中做不同数据处理，希望将数据落到数仓中的不同层，比如dwd、dws层；上游数据把不同的数据都放在一个[阅读全文]
- 创建时间： 编辑： | 浏览：
- 维度表输入&数据关联
- 文档创建者：Roxy
- 标签：
-
摘要：注：数据开发中实时任务当前属于内测阶段，如需试用或者了解详细信息，请联系技术支持（技术支持联系方式：前往「服务」，选择「在线支持」、电话「400-811-8890」）。1. 概述1.1 版本FineDa[阅读全文]
- 创建时间： 编辑： | 浏览：
- 使用文件传输节点传输图片/视频
- 文档创建者：Roxy
- 标签：
-
摘要：1. 概述1.1 应用场景用户想要将 FTP/SFTP服务器/本地FineDataLink 工程中的图片、视频输出至指定的服务器中。1.2 实现思路使用「文件传输」节点，设置「文件来源」为FT[阅读全文]
- 创建时间： 编辑： | 浏览：
- 运维中心概述
- 文档创建者：Roxy
- 标签：
-
摘要：1. 概述运维中心包括定时任务运维、实时任务运维、数据服务运维，为用户提供任务操作、状态、调度、运行记录等各方面任务维护功能，帮助用户更好的管理发布的任务。在「数据开发」中完成任务开发，并提交和发布至生[阅读全文]
- 创建时间： 编辑： | 浏览：
- Kerberos驱动整理
- 文档创建者：Roxy
- 标签：
-
摘要：1. 概述Kerberos 认证时，需要将驱动和 URL 按本文进行更改。2. 驱动数据库驱动URL格式驱动下载注意点TRANSWARP INCEPTOR（星环）jdbc:hive2://ip:port[阅读全文]
- 创建时间： 编辑： | 浏览：
- 数据连接 Kerberos 认证
- 文档创建者：Roxy
- 标签：
-
摘要：1. 概述1.1 认证方式简介1）Kerberos 认证是 Hadoop 生态的一种通用的认证方式。2）配置 Kerberos 认证的方式有两种：直接使用数据连接配置界面中的 Kerberos 认证：主[阅读全文]
- 创建时间： 编辑： | 浏览：
- 如何打堆栈
- 文档创建者：Roxy
- 标签：
-
摘要：1. 概述用户在使用 FDL 时，可能会出现宕机而导致无法使用的情况，此时可以打堆栈进行排查，本文将说明如何打堆栈。堆栈可以发给帆软技术支持排查（技术支持联系方式：前往「服务」，选择「在线支持」、电话「[阅读全文]
- 创建时间： 编辑： | 浏览：
- ETL计算引擎
- 文档创建者：Roxy
- 标签：
-
摘要：1. ETL计算引擎定义ETL（Extract, Transform, Load）计算引擎是用于执行 ETL 过程中数据转换阶段的关键组件之一。它负责处理从不同数据源抽取的数据，并根据预定义的转换规则进[阅读全文]
- 创建时间： 编辑： | 浏览：
- Hadoop Hive数据源使用说明
- 文档创建者：Roxy
- 标签：
-
摘要： 版本FineDataLink版本功能变动4.1.3定时任务自动建表支持指定分区定时任务支持选择分区表作为数据去向任务开发配置数据连接 详情请参见：配置Hadoop Hive数据源数[阅读全文]
- 创建时间： 编辑： | 浏览：
