
使用限制
由于 Hive 底层存储(HDFS)的限制,数据同步、数据转换-DB表输出中仅支持追加写入数据,不支持更新数据。
暂不支持 char 类型字段作为写入端使用,建议使用 varchar 类型字段。
自动建表时支持设置非空约束(not null),但是前端无法展示。
数据开发-定时任务
数据去向与映射
1)定时任务支持选择分区表作为数据去向,如下图所示:
2)定时任务自动建表支持指定分区键,如下图所示:
详情请参见:读取、创建、写入分区表
支持作为分区键的字段类型:
分类 | 字段类型 |
---|---|
星环 inceptor 数据库分区键支持的字段类型 |
|
星环 inceptor 数据库分区键不支持的字段类型 |
|
分区存在层级的关系,基于顺序,自动形成层级,第 1 个分区键为一级分区,第 2 个分区键为二级分区,以此类推,最多 8 级分区。
若某个字段被定义为分区字段,其在字段映射里默认处于末尾。
写入方式
当选择的目标表是分区表(包含分区键),或自动建表时定义了分区键,写入方式新增「分区写入」设置项。如下图所示:
分区级别、分区键均为自动获取,无法自定义;用户可配置写入方式、分区值。
写入方式:可选择静态分区、动态分区。
分区值:静态分区写入时,需要为分区键配置分区值。
数据管道
数据服务
详情请参见:数据服务概述