反馈已提交

网络繁忙

GaussDB 200数据源使用说明

  • 文档创建者:Roxy
  • 历史版本:8
  • 最近更新:Roxy 于 2024-09-14
  • 使用限制

    FineDataLink 支持连接 GaussDB 200 进行定时任务读写、管道任务写入、数据服务读取、实时任务写入

    GaussDB数据库不支持管道任务设置「目标端执行逻辑删除」。

    任务开发

    配置数据连接 

    详情请参见:配置GaussDB 200数据源

    装载方式推荐

    定时任务和数据管道任务中,装载方式可选择COPY装载普通装载

    COPY装载:数据写入量较大时推荐使用。

    普通装载:数据写入量小时推荐使用;或无法提供 COPY 方案所需用户权限时,选择普通装载方式。

    数据开发

    数据来源

    支持定时任务取数据库的分区表,如下图所示:

    数据去向与映射

    定时任务支持选择分区表作为数据去向,如下图所示:

    定时任务自动建表支持指定分区和分布键,如下图所示:

    详情请参见:读取、创建、写入分区表

    配置方式有如下特殊说明:

    支持范围分区、列表分区,范围分区(LESS THAN)和列表分区支持选择多个字段作为分区字段。

    • 范围分区和列表分区分区名称不支持为空,为空时按照位置自动取名(相当于不指定名称,数据库会自动取名,不需要FDL处理)

    • 范围分区有两种方式来指定范围(不支持指定包含或不包含,交互按照GaussDB的实际逻辑来展示)

           字段类型为日期时,间隔支持指定年月日

           字段类型为数字时,间隔支持指定正整数

    1)方式一:起始值和结束值必填,在起始结束值都合法的时候,才支持指定间隔,来自动划分分区,举例:「start (date '2015-01-01') end (date '2020-12-31') every (interval '1 year')」(与GP相同)

    2)方式二:单独指定「小于XXX」条件,支持指定小于「MAXVALUE」(与GP有差异)

    注:方式一和方式二指定的分区不允许共存(与GP有差异)

    范围分区不支持指定默认分区,列表分区支持指定默认分区。

    写入方式

    写入方式界面中可选择装载方式。如下图所示:

    任务运行中不支持切换装载方式;运行暂停/终止允许切换装载方式;装载方式切换之后,任务按照选择的装载方式运行。


    装载方式说明
    普通装载

    默认为普通装

    以 JDBC 做串行装载

    COPY 装载若选择 COPY 装载方式,需要在目标数据库先创建 fdl_temp 模式用来存放临时表,需要用户有建表、建指定模式的权限(如果已由 DBA 建好模式并赋权,数据库用户可不需要建 schema 的权限)
    写入方式
    说明
    直接将数据写入目标表

    1)目标表无主键且未配置「主键映射」时,使用 COPY 装载方式

    2)目标表有主键或配置「主键映射」后,支持三种主键冲突策略:主键相同,忽略输入源的数据主键相同,记录为脏数据主键相同,覆盖目标表的数据三种主键冲突策略,采用COPY装载方式+普通装载方式

    清空目标表,再写入数据采用COPY装载方式+普通装载方式
    基于标识字段,追加/更新/删除数据

    采用COPY装载方式+普通装载方式时:

    COPY 装载方式失败后,需要尝试将该批数据使用「普通装载」写入,写入异常将统计进入脏数据,当前这一批数据写完后,下一批继续优先尝试使用 COPY 进行装载


    数据管道

    管道任务中数据写入GaussDB 200

    选择去向步骤中 可选择装载方式。如下图所示:

    若选择 COPY 装载方式,需要在目标数据库先创建 fdl_temp 模式用来存放临时表,因此需要给该数据连接账号赋予在对应数据库创建模式的权限。

    管道任务自动建表支持指定分区和分布键,如下图所示:

    数据服务

    详情请参见:数据服务概述

    数据服务支持选择分区表作为数据来源,如下图所示:



    附件列表


    主题: 隐藏目录(不在目录树中显示,不可以搜到,可以通过链接访问)
    已经是第一篇
    已经是最后一篇
    • 有帮助
    • 没帮助
    • 只是浏览
    • 评价文档,奖励 1 ~ 100 随机 F 豆!

    鼠标选中内容,快速反馈问题

    鼠标选中存在疑惑的内容,即可快速反馈问题,我们将会跟进处理。

    不再提示

    10s后关闭



    AI

    联系我们
    在线支持
    获取专业技术支持,快速帮助您解决问题
    工作日9:00-12:00,13:30-17:30在线
    页面反馈
    针对当前网页的建议、问题反馈
    售前咨询
    采购需求/获取报价/预约演示
    或拨打: 400-811-8890 转1
    qr
    热线电话
    咨询/故障救援热线:400-811-8890转2
    总裁办24H投诉:17312781526
    提交页面反馈
    仅适用于当前网页的意见收集,帆软产品问题请在 问答板块提问前往服务平台 获取技术支持