历史版本13 :配置Doris資料源 返回文档
编辑时间:
内容长度:图片数:目录数:
修改原因:
1. 版本编辑
版本 | 功能变动 |
---|---|
4.0.23 | - |
4.0.27 | 写入到 Doris 采用 stream load 导入方式,即把数据输出为 CSV 格式,然后再 load 进数据库里,但是如果来源端的字段或字段名里存在换行,将其转化为CSV的时候,会被识别为多个字段或多个值,写入时出现问题。 因此将换行符从/n /t 改成\01 \02 字符 |
2. 准备工作编辑
2.1 版本和驱动
支持的数据库版本 | 驱动包下载 |
---|---|
0.14及以上版本 | 已内置,无需下载 |
2.2 收集连接信息
在连接数据库之前,请收集以下信息:
数据库所在服务器的 IP 地址和端口号;
数据库的名称;
数据库的用户名和密码;
3. 具体连接步骤编辑
1)登录 FineDataLink,选择「管理系统>数据连接>数据连接管理」,点击「新建数据连接」,找到 Doris,如下图所示:
注:如果非管理员用户想要配置数据连接,需要管理员给其分配管理系统下数据连接节点的权限,具体操作请查看 数据连接管理权限
2)输入 2.1 节的连接信息。如下图所示:
如果数据服务并发量较大,建议调大最大活动连接数,防止因数据服务高并发请求导致数据连接失败。
如果 Doris 作为数据写入端时使用,则需要配置 FE 节点,配置说明如下:
配置项 | 提示说明 | 配置项解释 |
---|---|---|
FE 节点地址 | 填写IP地址或主机名以及端口号,多个地址以,隔开 | 作为 Stream Load 的连接目标。 格式为 "ip:port"。其中 IP 是 FE 节点 IP,port 是 FE 节点的 http_port。 例如:192.168.101.71:8030,192.168.101.209:9030 可以填写多个,填写多个时数据将以轮询的方式写入。 |
3)进行测试连接,如下图所示: