最新历史版本 :配置星环 inceptor数据源 返回文档
编辑时间: 内容长度:图片数:目录数: 修改原因:

目录:

1. 概述编辑

1.1 版本

FineDataLink 版本功能变动
4.0.24-
4.1.3数据写入星环 TRANSWARP INCEPTOR 数据库时,支持创建、写入分区
4.2.1.4数据源名称改为星环 inceptor

1.2 应用场景

企业使用星环 inceptor 数据库存储业务数据,希望 FineDataLink 定时任务的读写支持星环 inceptor 

2. 使用限制编辑

数据源功能限制说明请参见:星环inceptor数据源特性说明

3. 配置数据连接编辑

3.1 前提条件

详情请参见:前提条件

3.2 版本和驱动

下载驱动,并将其上传至 FineDataLink,如何上传可参见:驱动管理

 支持的数据库版本选择驱动 驱动包 
V4.6org.apache.hive.jdbc.HiveDriver

4.6-inceptor-driver.jar


V4.6、V4.9.2、V5.2.1、V6.0.2

inceptor-sdk-transwarp-6.1.0-SNAPSHOT.jar

 

3.3 收集连接信息

在连接数据库之前,请收集以下信息:

  • 数据库所在服务器的 IP 地址和端口号。

  • 数据库的名称。

  • 数据库的用户名和密码。

3.4 具体连接步骤

创建数据连接步骤请参见:创建并管理数据源

需注意:

1)配置数据连接时,驱动需要切换为「自定义」,换为本文 3.2 节的驱动。

1732102873759232.png

2)星环支持 Kerberos 认证,Kerberos 认证方式详情可参见:数据连接 Kerberos 认证。连接前请:

  • 检查 /etc/hosts 中的机器名对应 IP 是否为局域网 IP。

  • 检查 /etc/hostname 中机器名设置和 /etc/hosts 中是否配置一致。

  • 检查 FineDataLink 所在机器 hosts 配置的 IP+ 机器名是否正确。

  • 检查本地连接时需要配置 /etc/hosts 文件,添加远端映射:IP+机器名,例如: 192.168.5.206  centos-phoenix 。

Guardian Token 认证:当 Kerberos/LDAP 认证开启时,也可以使用本方式,连接命令格式如下:

更多连接方式详情参见:连接方式

$ beeline -u "jdbc:transwarp2://<server_ip/hostname>:<port>/<database_name>;guardianToken=<access_token>"

3)如果 TRANSWARP INCEPTOR 作为数据写入端时使用,则需要配置 HDFS 地址,配置说明如下:

由于 inceptor 基于 hive 改写,为了提高写入速度,先建外表到HDFS,再装载到目标表。

配置项
提示说明
配置项解释
HDFS 地址填写IP地址或主机名以及端口号

Hadoop HDFS文件系统处于活跃状态的节点地址

格式为 "hdfs://ip:port"。

例如:hdfs://192.168.101.119:8020

确定 HDFS 地址中 IP 和端口的方法请参见:确认HDFS地址中的IP和端口

1732102921145988.png

4. 任务开发编辑

配置好该数据源后,可在以下功能场景中使用,详情请参见:

功能场景
操作指导
定时任务定时任务概述