反馈已提交

网络繁忙

2.3.7 更新日志

  • 文档创建者:FineTube
  • 历史版本:3
  • 最近更新:FineTube 于 2022-03-21
  • 1、版本

    版本编号:2.3.7

    发布日期:2022-3-21

    2、改良的功能

    数据管道

    8552

    管道任务初始化时全量部分不经过Kafka队列

    • Kafka Topic 设置是默认 10GB,某些场景下,客户的单表可能大于这个值,这样使用 kafka 同步全量的时候就有可能会导致旧的数据被清除导致丢数据。

    • 在2.3.7及以后的版本中,数据管道任务初始化全量采取不经过Kafka队列。

    数据编排

    7379

    MySQL的binlog支持解析主键变更前的值

    • 在某些场景下,会直接对表中的主键字段的值进行变更,在2.3.7及以后的版本中,支持此类主键数据更新情况的解析。

    8551

    当系统响应超时时,流任务组件预览时前后端报错一致性改造

    • 预览提示优化,原始提示:未知错误,在2.3.7及以后的版本中,问题提示为:系统响应超时。

    9159

    流任务【执行方式】优化,取消【数据执行调度策略】,改善用户使用体验

    • 无论任务级别选择流式或短批,对于算子行为都无影响,算子自身实现逻辑决定其是流式处理还是短批处理

    系统管理

    9135

    用户更改密码的操作在日志中进行记录

    • 新增对用户的修改密码操作记录日志,记录内容包括:

          1.所执行的操作(修改XX用户的密码)

          2.修改时间

          3.修改人

    • 记录至INFO级别全局日志中。

    • 例:2022-01-18 00:59:59.363 INFO – XXX用户修改了YYY用户的密码"。

    3、修复的bug

    数据管道

    7398- 当Kafka停掉之后,管道任务停止时可能出现长时间阻塞,此版本已修复。

    8201- 数据管道读取设置和写入设置中的树结构组件,在搜索模式下点击全选会选中所有节点,此版本已修复。

    8291- Oracle的数据源中存在Binary_float、Binary_doubles时,会导致同步任务失败,此版本已修复。

    8295- 管道任务失败,在执行记录页面均会出现两条记录,一条中断、一条停止,此版本已修复。

    8554- 在启动管道任务后,变更kafka的地址,会造成数据丢失,在新版本中,为了保证数据的一致性,在启动管道任务后,取消kafka地址的变更配置。

    9156- 当数据库为SQL Server 2008 R2时,数据管道选择 SQL Server 2008 数据目的地,无法正常启动任务,此版本已修复。

    数据编排

    7923- 在某些情况下,数据库为SQL Server 2008时,通过【表输入】和【数据字典】,进行with as的sql 语法编写时,运行报错,任务无法运行,此版本已修复。

    8195- 流任务包含未配置的 FDLoad 算子的时候,表输入预览报错,此版本已修复。

    8282- 在任务最开始没有配置绿色的输入组件的时候,若执行任务,会导致任务执行失败,一直报错

    • 在2.3.7及以后的版本,此bug已修复,会报错并提示至少需要一个输入组件

    8350- postgre增量组件预览时,如果字段中有timestamp类型的字段,会报错无法预览,但可以直接运行,此版本已修复。

    8366- 流任务第一个组件不是输入组件的时候,执行记录有执行完成的记录,但没有数据执行

    • 在2.3.7及以后的版本,此bug已修复,会报错并提示至少需要一个输入组件

    8399- 执行记录中任务【数据监控】中简道云数据推送的输入和输出没有数值,此版本已修复。

    8834- Kafka输出算子,在测试链接失败后,没有详细的报错提示,后台中也没有错误日志记录,此版本已修复。

    9021- 在某些情况下,Oracle中存在一张表,存在NCHAR字段类型,在流任务中,通过【解析Logminer】算子获取单张表的字段时,会导致获取的长度和小数点不正确,此版本已修复。

    9168- 当数据源为Hive时,通过【表输入】查询出来的数据量在[1000,10000)时,会出现 DataAccessException的报错,此版本已修复。

    9175- MongoDB 输入到 MongoDB 输出,执行之后,目标集合中已经成功写入数据,但是【数据监控】中的【输出行数】为空,此版本已修复。

    9183- 在某些情况下,简道云推送组件,在选择了“自定义提交”后,切换到“智能提交”的时候,无法保存,提示“需要配置自定义提交”,此版本已修复。

    9195- 在使用Binlog解析mysql时,如果源表字段顺序改变会导致数据错乱,此版本已修复。

    9198- 在进行【公式】编写时,选择【插件函数】lastWorkDay和holiday中获取的节假日,在计算2022年是计算有误,此版本已修复。

    9201- 检测空流组件在定时执行时只有第一次生效,此版本已修复。

    9207- 在由旧版本升级到2.3.7时,if-else组件配置前端无法正常显示,但任务可以直接正常运行,此版本已修复。

    9215- 当流任务超过1000个时,任务查询会比较慢,严重影响用户体验,此版本已修复。


    数据服务

    8266- 在新建业务包,输入业务包名称保存后;再次点击业务包,显示的是刚刚保存的包名,此版本已修复。


    系统管理

    8630- API监控台的调用者、返回码的筛选有问题,无法筛选出正确结果,此版本已修复。

    8676- 服务器中trans文件的中文,由于没有指定utf-8编码,导致文件名显示乱码,但在前段显示正常,此版本已修复。

    9060- 注册管理的模块还是【数据集成】,名字应该修改为【数据编排】,此版本已修复。

    附件列表


    主题: 发行说明
    已经是第一篇
    已经是最后一篇
    • 有帮助
    • 没帮助
    • 只是浏览

    售前咨询电话

    400-811-8890转1

    在线技术支持

    热线电话:400-811-8890转2

    总裁办24H投诉

    热线电话:173-1278-1526

    文 档反 馈

    鼠标选中内容,快速反馈问题

    鼠标选中存在疑惑的内容,即可快速反馈问题,我们将会跟进处理。

    不再提示

    10s后关闭