数据管道

"数据管道" 分类下的文档该分类下有11篇文档创建该分类下的文档
数据源支持范围
文档创建者:男上加男      创建时间:09-01 14:01      标签:      编辑:6次    |   浏览:2794次

摘要:1、概述数据管道 支持数据源的类型如下所示:1)通过 BINLOG 模式同步 MySQL数据库。2)通过 Oracle LogMiner 模式同步 Oracle数据库。3)通过 CDC 模式同步 SQL[阅读全文:]

数据管道概述
文档创建者:男上加男      创建时间:08-30 09:33      标签:      编辑:10次    |   浏览:7661次

摘要:数据管道是FineTube中的重要模块,旨在提供稳定、高效的数据同步功能。1、背景面对各行各业对数据的应用,数据处理会有很多的需求,其中包括能够快速配置大量数据表的原样同步任务,能够满足数据实时同步的时[阅读全文:]

数据管道注意事项
文档创建者:52heartz      创建时间:10-15 17:42      标签:      编辑:1次    |   浏览:2069次

摘要:本文档会记录一些数据管道模块使用中的注意事项及解决方案。1、MySQL 数据库的 8.0.21、8.0.22、8.0.23 这些版本的元数据表有缺陷,会导致 FT 无法获取到正确的元数据,在创建数据管道[阅读全文:]

Oracle实时增量同步到SQL Server
文档创建者:男上加男      创建时间:09-01 16:28      标签:      编辑:4次    |   浏览:7511次

摘要:1、概述将业务系统Oracle的数据全库同步到 SQL Server 数据库,用于专门的数据分析。2、任务配置新建管道任务:  数据管道>管道任务>创建管道任务2.1基本[阅读全文:]

3、任务设置——目标库
文档创建者:男上加男      创建时间:10-09 14:44      标签:      编辑:0次    |   浏览:2163次

摘要:① 配置对应的目标库或者Schema。② 写入并发数:设置任务最高能同时写入的表数量;写入速率限制:每秒最大行数 和 最大流量限制。③ 表和名称字段:提供原表原样,以及规范大小写两种方式。④ FDLoa[阅读全文:]

2、任务设置——数据源
文档创建者:男上加男      创建时间:10-09 14:43      标签:      编辑:0次    |   浏览:2897次

摘要:①读取方式:数据管道任务目前仅支持基于日志的读取方式           MySQL: BINLOG 模式    &nbs[阅读全文:]

1、基本信息
文档创建者:男上加男      创建时间:10-09 14:41      标签:      编辑:0次    |   浏览:2330次

摘要:在基本信息页面,主要分为三大部分:①任务名称② 数据源③ 目标库数据连接信息,需要提前进行配置,若不存在,需要定义新的数据连接,请点击下拉框旁的添加按钮④和⑤,会跳转到 定义数据连接[阅读全文:]

简道云原表原样实时增量同步
文档创建者:男上加男      创建时间:09-14 10:37      标签:      编辑:5次    |   浏览:5046次

摘要:1、概述1.1 应用场景当用户希望将简道云应用中的所有表单一次性同步到数据库,便于后续分析,从而替代以往的单个表单逐一同步操作。1.2 配置流程在 管道任务中,选择数据源类型为【简道云】,配置[阅读全文:]