反馈已提交

网络繁忙

配置Doris数据源

  • 文档创建者:Roxy
  • 历史版本:14
  • 最近更新:Roxy 于 2024-01-15
  • 1. 版本

    版本
    功能变动
    4.0.23-
    4.0.27

    写入到 Doris 采用 stream load 导入方式,即把数据输出为 CSV 格式,然后再 load 进数据库里,但是如果来源端的字段或字段名里存在换行,将其转化为CSV的时候,会被识别为多个字段或多个值,写入时出现问题。

    因此将换行符从/n /t 改成\01 \02 字符

    2. 使用限制

    FineDataLink 支持连接 Doris ,使用限制说明详情参见:Doris数据源使用说明

    3. 准备工作

    3.1 版本和驱动

     支持的数据库版本驱动包下载
     

    0.14及以上版本

     
    已内置,无需下载

    3.2 收集连接信息

    在连接数据库之前,请收集以下信息:

    • 数据库所在服务器的 IP 地址和端口号;

    • 数据库的名称;

    • 数据库的用户名和密码;

    4. 具体连接步骤

    1)登录 FineDataLink,选择「管理系统>数据连接>数据连接管理」,点击「新建数据连接」,找到 Doris,如下图所示:

    注:如果非管理员用户想要配置数据连接,需要管理员给其分配管理系统下数据连接节点的权限,具体操作请查看 数据连接管理权限

    2)输入 3.1 节的连接信息。如下图所示:

    • 如果数据服务并发量较大,建议调大最大活动连接数,防止因数据服务高并发请求导致数据连接失败。

    • 如果 Doris 作为数据写入端时使用,则需要配置 FE 节点,配置说明如下:

    配置项
    提示说明
    配置项解释
    FE 节点地址填写IP地址或主机名以及端口号,多个地址以,隔开

    作为 Stream Load 的连接目标。

    格式为 "ip:port"。其中 IP 是 FE 节点 IP,port 是 FE 节点的 http_port。

    例如:192.168.101.71:8030,192.168.101.209:9030

    可以填写多个,填写多个时数据将以轮询的方式写入。

    3)进行测试连接,如下图所示:

    5. 使用数据源

    • 配置好数据源后即可在「数据开发」中使用数据源,详情参见:数据开发概述

    • 配置好数据源后即可在「数据管道」中将使用数据源,详情参见:数据管道概述

    • 配置好数据源后即可在「数据服务」中将使用数据源,详情参见:数据服务概述



    附件列表


    主题: 数据源配置与使用
    • 有帮助
    • 没帮助
    • 只是浏览
    • 评价文档,奖励 1 ~ 100 随机 F 豆!

    鼠标选中内容,快速反馈问题

    鼠标选中存在疑惑的内容,即可快速反馈问题,我们将会跟进处理。

    不再提示

    10s后关闭

    联系我们
    在线支持
    获取专业技术支持,快速帮助您解决问题
    工作日9:00-12:00,13:30-17:30在线
    页面反馈
    针对当前网页的建议、问题反馈
    售前咨询
    采购需求/获取报价/预约演示
    或拨打: 400-811-8890 转1
    qr
    热线电话
    咨询/故障救援热线:400-811-8890转2
    总裁办24H投诉:17312781526
    提交页面反馈
    仅适用于当前网页的意见收集,帆软产品问题请在 问答板块提问前往服务平台 获取技术支持