反馈已提交

网络繁忙

管道任务状态、表状态说明

  • 文档创建者:Wendy123456
  • 历史版本:6
  • 最近更新:Wendy123456 于 2024-12-06
  • 1. 概述

    1.1 版本

    FineDataLink 版本功能变动
    4.0.5
    -
    4.1.2运行中的任务支持查看任务配置情况
    4.2.1.1

    1)管道任务状态划分为任务级、表级

    • 任务级状态增加「启动中」、「暂停中」、「等待重试中」

    • 表级状态增加「待初始化」、「初始化中」、「待存量同步」、「待增量同步」、「脏数据处理中」、「中止」

    2)表中止时,会给出提示

    1.2 应用场景

    IT 人员在配置完数据管道任务后,需要对管道任务的运行状态进行监控。

    1.3 功能简介

    点击任务列表中的任务,可以看到任务的运行状态,比如启动中、运行中、中止等;也可查看到表状态,比如带初始化、中止、增量同步中等。如下图所示:

    12.png

    黄色标记内容说明如下表所示:

    序号
    说明
    1
    • 显示运行状态,例如中止、运行中、启动中等

    • 显示任务最近一次启动时间

    • 启动中的任务,增加里程碑效果,显示目前正在执行的启动项目和执行结果。示例:点31.png按钮,可显示检查项(4.2.1.1 版本新增)。如下图所示:

    1733297672720735.png

    2

    来源端数据类型

    来源端数据读取时间

    3

    目标端数据类

    目标端数据读取时间

    4启动/暂停任务 

     进入任务编辑界面

    2. 管道任务状态

    管道任务处于 XX 状态时,处理逻辑以及后续状态说明如下图所示:

    注:黄色背景的状态为 4.2.1.1 及之后版本新增的状态。

    管道任务状态-CP.drawio (1).png

    注1:任务暂停或异常中止时,「初始化中」、「存量同步中」、「脏数据处理中」这几个状态,由于任务打断,会回退到上一个状态。

    注2:编辑管道任务说明请参见:编辑管道任务

    任务状态
    此状态下处理逻辑及后续状态说明支持的任务操作
    草稿
    -
    编辑、删除/批量删除管道任务
    待启动-启动/批量启动、编辑、删除/批量删除

    启动中

    4.2.1.1 及之后版本新增

    启动完成后,管道任务进入「运行中」状态,任务中各表进入到「初始化中」状态,准备建表并开始存量/增量同步

    支持查看、手动中止启动任务

    运行中-
    • 查看、暂停/批量暂停管道任务

    • 脏数据处理:重新同步、重试脏数据、忽略脏数据

    • 如果单表处于存量同步中,不能触发 脏数据处理 中的重新同步

    • 任务状态在运行中时,支持 失败重试 功能

    暂停中

    4.2.1.1 及之后版本新增

    「暂停中」状态下,任务将保存断点信息,并暂停任务;暂停完成后,任务变为「已暂停」状态

    查看、手动中止暂停

    已暂停-
    • 启动/批量启动、编辑、删除/批量删除

    • 脏数据处理重新同步、重试脏数据、忽略脏数据

    • 任务运行&表不在存量同步状态,才允许点击 脏数据处理 中的重新同步

    待重试

    4.2.1.1 及之后版本新增

    如果开启了失败重试功能,则按照配置进行异常重试

    查看、暂停/批量暂停管道任务

    中止-
    • 启动/批量启动、编辑、删除/批量删除

    • 脏数据处理重新同步、重试脏数据、忽略脏数据

    • 任务运行&表不在存量同步状态,才允许点击 脏数据处理 中的重新同步

    3. 表级状态

    管道任务中表处于 XX 状态时,处理逻辑以及后续状态说明如下图所示:

    注:黄色背景的状态为 4.2.1.1 及之后版本新增的状态。

    管道表状态.drawio (1).png

    注:任务未处在正常运行状态时,任务内的表不会实际执行任何同步操作。

    表状态
    此状态下处理逻辑以及后续状态说明支持的操作

    初始化

    4.2.1.1 及之后版本新增

    表的初始状态

    当任务尚未启动完成,并且表还没开始初始化时,会保持在「待初始化」

    重新同步时,表状态会从待初始化开始

    参见本文 2.1 节表格说明

    初始化中

    4.2.1.1 及之后版本新增

    进入初始化过程,初始化过程会进行建表操作,建表完成后,配置调整为已存在表

    待存量同步

    4.2.1.1 及之后版本新增

    初始化操作完成,等待进入存量同步过程
    存量同步中-

    待增量同步

    4.2.1.1 及之后版本新增

    存量同步完成,等待进入增量同步过程

    要等所有的表进入待增量同步,才开始增量同步

    增量同步中-

    脏数据处理中

    4.2.1.1 及之后版本新增

    表状态处于增量同步中,且脏数据达到阈值时,如果任务开启了失败重试功能,则按照配置自动触发脏数据重试,同时表状态变为脏数据处理中

    脏数据处理后,如果脏数据量达到阈值以下,则表状态恢复为增量同步中;如果按指定次数重试完成后,脏数据量仍大于等于阈值,则表变为异常中止

    中止

    4.2.1.1 及之后版本新增

    处于中止下的表,不会同步数据

    用户可以通过重新同步脏数据重试脏数据忽略等方式处理完脏数据,重新让表恢复同步

    当任务中所有的表都异常中止,任务随即变成异常中止

    注:4.2.1.1 及之后版本,管道任务中有表中止时,会给出提示。如下图所示:

    1733365667654652.png




    附件列表


    主题: 任务运维
    已经是第一篇
    已经是最后一篇
    • 有帮助
    • 没帮助
    • 只是浏览
    • 评价文档,奖励 1 ~ 100 随机 F 豆!

    鼠标选中内容,快速反馈问题

    鼠标选中存在疑惑的内容,即可快速反馈问题,我们将会跟进处理。

    不再提示

    10s后关闭



    AI

    联系我们
    在线支持
    获取专业技术支持,快速帮助您解决问题
    工作日9:00-12:00,13:30-17:30在线
    页面反馈
    针对当前网页的建议、问题反馈
    售前咨询
    采购需求/获取报价/预约演示
    或拨打: 400-811-8890 转1
    qr
    热线电话
    咨询/故障救援热线:400-811-8890转2
    总裁办24H投诉:17312781526
    提交页面反馈
    仅适用于当前网页的意见收集,帆软产品问题请在 问答板块提问前往服务平台 获取技术支持