最新历史版本 :Hadoop Hive数据源使用说明 返回文檔
編輯時間: 內容長度:图片数:目录数: 修改原因:

目錄:

 版本编辑

FineDataLink版本
功能变动
4.1.3

  • 定时任务自动建表支持指定分区

  • 定时任务支持选择分区表作为数据去向

任务开发编辑

配置数据连接 

详情请参见：配置Hadoop Hive数据源

数据开发

详情请参见：数据开发概述

数据去向与映射

定时任务支持选择分区表作为数据去向，如下图所示：

详情请参见：读取、创建、写入分区表

定时任务自动建表支持指定分区键，如下图所示：

注：Hive 数据库不支持动态分区键的值为中文。

支持作为分区键的字段类型：

分类字段类型
Hive分区键支持的字段类型

  • 整数类型：如 tinyint、smallint、int、bigint。

  • 浮点数类型：如 float、double。

  • 字符串类型：如 string、varchar。

  • 日期类型：如 date、timestamp。

  • 其他：如 array、map、struct 等。

Hive分区键不支持的字段类型

  • 复杂类型：例如 array、map、struct 等，这些类型在 Hive 中不被支持作为分区键。

  • NULL 类型：Hive 不支持 NULL 作为分区键。

  • 集合类型：例如 set、list、tuple 等，这些类型在 Hive 中不被支持作为分区键。

  • 其他特定数据类型：例如 bit、decimal、binary 等，这些类型在 Hive 中也不被支持作为分区键。

写入方式

当选择的目标表是分区表（包含分区键），或自动建表时定义了分区键，写入方式新增「分区写入」设置项。如下图所示：

数据管道

详情请参见：数据管道概述

数据服务

详情请参见：数据服务概述