反馈已提交

网络繁忙

TRANSWARP INCEPTOR数据源使用说明

  • 文档创建者:Roxy
  • 历史版本:5
  • 最近更新:Roxy 于 2024-09-04
  • 版本

    FineDataLink版本
    功能变动
    4.1.3
    • 定时任务自动建表支持指定分区

    • 定时任务支持选择分区表作为数据去向

    使用限制

    • 由于Hive底层存储(HDFS)的限制,数据同步、数据转换-DB表输出中仅支持追加写入数据,不支持更新数据。

    • 暂不支持 char 类型字段作为写入端使用,建议使用 varchar 类型字段。

    • 自动建表时支持设置非空约束(not null),但是前端无法展示。

    任务开发

    配置数据连接 

    详情请参见:配置TRANSWARP INCEPTOR数据源

    数据开发

    数据去向与映射

    定时任务支持选择分区表作为数据去向,如下图所示:


    定时任务自动建表支持指定分区键,如下图所示:

    详情请参见:读取、创建、写入分区表

    支持作为分区键的字段类型:

    分类字段类型
    星环 TRANSWARP INCEPTOR 数据库分区键支持的字段类型
    • 整数类型:如 tinyint、smallint、int、bigint。

    • 浮点数类型:如 float、double。

    • 字符串类型:如 string、varchar。

    • 日期类型:如 date、timestamp。

    • 其他:如 array、map、struct 等。

    星环 TRANSWARP INCEPTOR 数据库分区键不支持的字段类型
    • 复杂类型:例如 array、map、struct 等,这些类型在 Hive 中不被支持作为分区键。

    • NULL 类型:Hive 不支持 NULL 作为分区键。

    • 集合类型:例如 set、list、tuple 等,这些类型在 Hive 中不被支持作为分区键。

    • 其他特定数据类型:例如 bit、decimal、binary 等,这些类型在 Hive 中也不被支持作为分区键。

    写入方式

    当选择的目标表是分区表(包含分区键),或自动建表时定义了分区键,写入方式新增「分区写入」设置项。如下图所示:

    分区级别、分区键均为自动获取,无法自定义;用户可配置写入方式、分区值。

    • 写入方式:可选择静态分区、动态分区。

    • 分区值:静态分区写入时,需要为分区键配置分区值。

    数据管道

    详情请参见:数据管道概述

    数据服务

    详情请参见:数据服务概述




    附件列表


    主题: 隐藏目录(不在目录树中显示,不可以搜到,可以通过链接访问)
    已经是第一篇
    已经是最后一篇
    • 有帮助
    • 没帮助
    • 只是浏览
    • 评价文档,奖励 1 ~ 100 随机 F 豆!

    鼠标选中内容,快速反馈问题

    鼠标选中存在疑惑的内容,即可快速反馈问题,我们将会跟进处理。

    不再提示

    10s后关闭



    AI

    联系我们
    在线支持
    获取专业技术支持,快速帮助您解决问题
    工作日9:00-12:00,13:30-17:30在线
    页面反馈
    针对当前网页的建议、问题反馈
    售前咨询
    采购需求/获取报价/预约演示
    或拨打: 400-811-8890 转1
    qr
    热线电话
    咨询/故障救援热线:400-811-8890转2
    总裁办24H投诉:17312781526
    提交页面反馈
    仅适用于当前网页的意见收集,帆软产品问题请在 问答板块提问前往服务平台 获取技术支持