"模块介绍" 分类下的文档该分类下有37篇文档创建该分类下的文档
数据源支持范围
文档创建者:男上加男      创建时间:09-01 14:01      标签:      编辑:6次    |   浏览:2777次

摘要:1、概述数据管道 支持数据源的类型如下所示:1)通过 BINLOG 模式同步 MySQL数据库。2)通过 Oracle LogMiner 模式同步 Oracle数据库。3)通过 CDC 模式同步 SQL[阅读全文:]

数据管道概述
文档创建者:男上加男      创建时间:08-30 09:33      标签:      编辑:10次    |   浏览:7621次

摘要:数据管道是FineTube中的重要模块,旨在提供稳定、高效的数据同步功能。1、背景面对各行各业对数据的应用,数据处理会有很多的需求,其中包括能够快速配置大量数据表的原样同步任务,能够满足数据实时同步的时[阅读全文:]

单表实时同步处理
文档创建者:男上加男      创建时间:09-07 11:23      标签:      编辑:4次    |   浏览:4500次

摘要:1、背景一句话背景总结:需要对业务系统数据进行实时监控实际应用场景:1、在双十一,黑色星期五这种购物节日时,商家往往会做出各种各样的活动进行促销。这时候会产生各种各样的问题,通过微信、云闪付APP、电话[阅读全文:]

数据编排概述
文档创建者:男上加男      创建时间:09-08 17:20      标签:      编辑:3次    |   浏览:7707次

摘要:数据编排中,流任务的新建,分为基础信息、流程设计、全局参数、执行计划、异常处理、消息提醒、运行监控七部分,其中带*号的为必填项。1、基础信息此页面显示任务名称、任务分组、以及备注2、流程设计1、通过将左[阅读全文:]

Lic注册
文档创建者:男上加男      创建时间:11-22 19:16      标签:      编辑:3次    |   浏览:4426次

摘要:1. 概述1.1 版本FineTube版本2.0、2.31.2 功能简介本地机器信息认证是最常见的认证方式,操作简单,十分方便。FineTube所在服务器的物理信息固定,用户通过导出 rif[阅读全文:]

从数据库抽取数据并推送到企业微信群机器人
文档创建者:男上加男      创建时间:11-09 14:32      标签:      编辑:5次    |   浏览:7423次

摘要:1. 概述1.1 版本Finetube版本JAR 包版本App 版本2.02020-11-101.2 预期效果从数据库中取出本月销售额并通过企业微信群机器人推送到财务群1.3 实现思路通过表输入组件从数[阅读全文:]

API接口取数
文档创建者:男上加男      创建时间:09-08 09:30      标签:      编辑:3次    |   浏览:8981次

摘要:1、背景XML和 JSON 是现今互联网中常用的两种数据交换格式,两种格式都可以进行网络数据交换,数据存储,配置文件,但由于两种文件不同的优缺点,XML主要用于配置文件,JSON主要应用于网络数据交换。[阅读全文:]

2、API管理
文档创建者:男上加男      创建时间:10-18 11:39      标签:      编辑:1次    |   浏览:3657次

摘要:API管理包含创建服务、创建API接收数据、创建API发布数据准备模块准备好的数据。1、创建服务① 创建服务② 填写服务名称③ 保存创建的服务④ 针对API服务,出于安全策略考虑,还可进行IP的黑白名单[阅读全文:]

3、API监控台
文档创建者:男上加男      创建时间:10-18 11:42      标签:      编辑:1次    |   浏览:1703次

摘要:FineTube还提供了API监控台,可以查看API被调用的性能情况,以及对应调用的IP地址。[阅读全文:]

1、数据准备
文档创建者:13276267640      创建时间:10-18 11:00      标签:      编辑:2次    |   浏览:2933次

摘要:对外提供数据的准备模块:创建业务包、创建数据集。1、创建业务包① 创建业务包:一般来说,一个模块会准备对应的一个业务包② 输入对应的业务包名称③ 保存:保存业务包的创建2、创建数据集数据集支持两种模式:[阅读全文:]

数据管道注意事项
文档创建者:52heartz      创建时间:10-15 17:42      标签:      编辑:1次    |   浏览:2057次

摘要:本文档会记录一些数据管道模块使用中的注意事项及解决方案。1、MySQL 数据库的 8.0.21、8.0.22、8.0.23 这些版本的元数据表有缺陷,会导致 FT 无法获取到正确的元数据,在创建数据管道[阅读全文:]

Oracle实时增量同步到SQL Server
文档创建者:男上加男      创建时间:09-01 16:28      标签:      编辑:4次    |   浏览:7481次

摘要:1、概述将业务系统Oracle的数据全库同步到 SQL Server 数据库,用于专门的数据分析。2、任务配置新建管道任务:  数据管道>管道任务>创建管道任务2.1基本[阅读全文:]

3、任务设置——目标库
文档创建者:男上加男      创建时间:10-09 14:44      标签:      编辑:0次    |   浏览:2151次

摘要:① 配置对应的目标库或者Schema。② 写入并发数:设置任务最高能同时写入的表数量;写入速率限制:每秒最大行数 和 最大流量限制。③ 表和名称字段:提供原表原样,以及规范大小写两种方式。④ FDLoa[阅读全文:]

2、任务设置——数据源
文档创建者:男上加男      创建时间:10-09 14:43      标签:      编辑:0次    |   浏览:2880次

摘要:①读取方式:数据管道任务目前仅支持基于日志的读取方式           MySQL: BINLOG 模式    &nbs[阅读全文:]

1、基本信息
文档创建者:男上加男      创建时间:10-09 14:41      标签:      编辑:0次    |   浏览:2320次

摘要:在基本信息页面,主要分为三大部分:①任务名称② 数据源③ 目标库数据连接信息,需要提前进行配置,若不存在,需要定义新的数据连接,请点击下拉框旁的添加按钮④和⑤,会跳转到 定义数据连接[阅读全文:]

简道云原表原样实时增量同步
文档创建者:男上加男      创建时间:09-14 10:37      标签:      编辑:5次    |   浏览:5017次

摘要:1、概述1.1 应用场景当用户希望将简道云应用中的所有表单一次性同步到数据库,便于后续分析,从而替代以往的单个表单逐一同步操作。1.2 配置流程在 管道任务中,选择数据源类型为【简道云】,配置[阅读全文:]

单点登陆
文档创建者:男上加男      创建时间:09-10 16:42      标签:      编辑:0次    |   浏览:583次

摘要:1、背景[阅读全文:]

注意事项
文档创建者:男上加男      创建时间:09-06 18:26      标签:      编辑:0次    |   浏览:1442次

摘要:1、所有标注为Beta的功能,为不推荐使用功能。[阅读全文:]

sqlserver cdc输入
文档创建者:男上加男      创建时间:08-02 16:45      标签:      编辑:0次    |   浏览:1332次

摘要:1 概述1.1 版本最早支持版本:V2.31.2 功能介绍从sqlserver数据库的cdc表中读取数据1.3 应用场景基于sqlserver的cdc技术实现sqlserver数据库的实时增量同步1.4[阅读全文:]

表输入
文档创建者:男上加男      创建时间:06-28 16:40      标签:      编辑:6次    |   浏览:2142次

摘要:1 概述1.1 版本最早支持版本:V2.31.2 功能介绍从常见的关系型数据库表中读取数据。例如:MySQL、SQLServer、Oracle、PostgreSql等1.3 应用场景同步数据库表数据到其[阅读全文:]

oracle cdc输入
文档创建者:男上加男      创建时间:08-02 09:57      标签:      编辑:1次    |   浏览:1295次

摘要:1 概述1.1 版本最早支持版本:V2.31.2 功能介绍从oracle数据库的cdc表中读取数据1.3 应用场景基于oracle的cdc技术实现oracle数据库的实时增量同步1.4 消息格式输入格式[阅读全文:]

XML文件输入
文档创建者:男上加男      创建时间:06-29 16:53      标签:      编辑:1次    |   浏览:1125次

摘要:1 概述1.1 版本最早支持版本:V2.31.2 功能介绍读取XML文件1.3 应用场景读取XML文件,输出一个XML格式的字符串,通常需要搭配一个XML格式化组件来解析1.4 消息格式输入格式:无输出[阅读全文:]

文本文件输入
文档创建者:男上加男      创建时间:06-29 16:33      标签:      编辑:0次    |   浏览:1232次

摘要:1 概述1.1 版本最早支持版本:V2.31.2 功能介绍按行读取文本文件数据1.3 应用场景当文件不是标准的csv格式时,可使用文本文件输入组件读取1.4 消息格式输入格式:无输出格式:KVP1.5[阅读全文:]

CSV文件输入
文档创建者:男上加男      创建时间:06-29 09:58      标签:      编辑:2次    |   浏览:1672次

摘要:1 概述1.1 版本最早支持版本:V2.31.2 功能介绍读取csv文件数据1.3 应用场景读取csv文件数据并存入数据库1.4 消息格式输入格式:无输出格式:KVP1.5 配置项说明1.5.1 基本属[阅读全文:]

生成记录
文档创建者:男上加男      创建时间:06-28 15:51      标签:      编辑:1次    |   浏览:2032次

摘要:1 概述1.1 版本最早支持版本:V2.31.2 功能介绍生成指定条数的消息1.3 应用场景通常都用来作为一个任务流的入口1.4 消息格式输入格式:无输出格式:KVP1.5 配置项说明1.5.1 基本属[阅读全文:]

数据集成问题汇总
文档创建者:男上加男      创建时间:09-15 16:10      标签:      编辑:1次    |   浏览:5491次

摘要:oracle数据库同步到简道云常见问题处理 1_1.pdforacle数据库同步到简道云操作指南1_1.pdf[阅读全文:]

从数据库抽取数据并通过企业微信应用推送到个人
文档创建者:男上加男      创建时间:11-10 09:15      标签:      编辑:3次    |   浏览:6013次

摘要: 1. 概述1.1 版本Finetube版本JAR 包版本App 版本2.02020-11-101.2 预期效果从数据库中取出个人销售额并通过企业微信应用推送到个人1.3 实现思路通过表输入组[阅读全文:]