反馈已提交

网络繁忙

配置Kafka数据源

  • 文档创建者:Roxy
  • 历史版本:7
  • 最近更新:Roxy 于 2023-12-06
  • 1. 概述

    1.1 版本

    版本
    功能变动
    4.0.20.1支持0.10.2以上的Kafka版本

    1.2 应用场景

    为了便于用户通过配置 Kafka 消费者的方式,实时从 Kafka 中取数。FineDataLink 支持配置 Kafka 数据连接。

    注:当前仅「数据管道」支持使用 Kafka 数据源。

    2. 准备工作

    2.1 收集连接信息

    在连接之前,请收集以下信息:

    • Kafka 服务的 IP 地址和端口号;

    • 若是用户名密码认证,需要收集用户名和密码;

    3. 具体连接步骤

    1)登录 FineDataLink,选择「管理系统>数据连接>数据连接管理」,点击「新建数据连接」。如下图所示:

    注:如果非管理员用户想要配置数据连接,需要管理员给其分配管理系统下数据连接节点的权限,具体操作请查看 数据连接管理权限

    2)找到 Kafka,如下图所示:

    3)输入 2.1 节的连接信息。如下图所示:

    数据连接配置项如下图所示:

    配置项
    配置说明
    数据连接名称 

    填写数据连接名称。


    kafka服务地址

    配置kafka的访问地址

    示例格式:demo.fanruan.com:9093

    填写IP地址或主机名以及端口号,多个地址以“,”隔开

    认证方式无认证/用户名密码
    • 无认证

    • 用户名密码:输入连接使用的 Kafka 用户账号和密码

    编码

    即encoding参数,当键类型KEY或者值类型MESSAGE配置为STRING时,决定读取时的编码。

    注:默认编码是utf-8。

    读取最小字节数(B)

    用户可以手动填写

    校验项:

    • 仅支持填写正整数,正整数校验

    • 不能包含空格

    读取时间(ms)

    用户可以手动填写

    校验:

    • 仅支持填写正整数,正整数校验

    • 不能包含空格

    扩展参数项

    支持新增/删除参数项和参数值

    可以参考:Apache Kafka 进行配置

    • 「新增参数项」和「参数值」限制长度<=50字符

    • 「新增参数项」只能是英文字母和".",「参数值」只能是英文字母和数字

    • 不能包含空格

    • 不能为空

    4)进行测试连接,如下图所示:

    4. 使用数据源

    当前仅「数据管道」支持使用 Kafka,详情参见:配置管道任务-Kafka






    附件列表


    主题: 数据源配置与使用
    已经是第一篇
    已经是最后一篇
    • 有帮助
    • 没帮助
    • 只是浏览
    • 评价文档,奖励 1 ~ 100 随机 F 豆!

    鼠标选中内容,快速反馈问题

    鼠标选中存在疑惑的内容,即可快速反馈问题,我们将会跟进处理。

    不再提示

    10s后关闭

    联系我们
    在线支持
    获取专业技术支持,快速帮助您解决问题
    工作日9:00-12:00,13:30-17:30在线
    页面反馈
    针对当前网页的建议、问题反馈
    售前咨询
    采购需求/获取报价/预约演示
    或拨打: 400-811-8890 转1
    qr
    热线电话
    咨询/故障救援热线:400-811-8890转2
    总裁办24H投诉:17312781526
    提交页面反馈
    仅适用于当前网页的意见收集,帆软产品问题请在 问答板块提问前往服务平台 获取技术支持