调用任务

  • Last update:  2022-06-28
  • 1. 概述

    1.1 版本说明

    FineBI 版本功能变动
    6.0-

    1.2 应用场景

    用户希望可以在当前任务中调用其他任务,直接设置任务间执行的依赖关系,「调用任务」节点可满足该需求。

    1.3 功能简介

    「调用任务」节点可调用其他任务,完成跨任务的编排。

    2. 功能介绍

    「调用任务」节点界面如下图所示:

    设置项介绍如下表所示:

    设置项说明
    调用任务下拉框选择其他 ETL 任务,自身和没管理权限的任务不可选
    参数传递

    默认不勾选,如果勾选了将当前任务的参数传递给子任务,那么定义的任务参数、参数赋值输出的参数都可以传递给子任务使用

    注:支持参数跨层级传递

    勾选后,界面如下图所示:

    参数赋值:仅所在的分支上游「参数赋值」输出的参数。参数赋值节点的参数可以被下游分支所有的节点使用,但是不可跨分支被其他节点使用

    任务参数:所有任务参数都可以选择传递给子任务

    跨层级传递逻辑说明:

    在选择参数传递给子任务时,只能选择本任务内已经定义好的参数,所以在超过两个层级的场景下:孙任务想要用到爷任务里的参数,需要上层的两级任务均有同名参数,且都配置了传递给子任务

    示例:若任务 c 里有一个参数 p1 ,如果任务 a 也想用,那么任务 b 里也要有一个参数 p1 ,然后在任务 c 和任务 b 里都配置参数 p1 向子任务传递:

    3. 示例

    我们创建2个ETL任务,任务1和任务2,任务1中使用【调用任务】节点来调用任务2,并且通过数据同步节点使用任务2中生成的结果数据进行二次加工,获得最终需要的分析数据。

    3.1 创建被调用任务

    1)创建一个 ETL 任务,重命名为任务2,并将一个数据同步节点拖到设计界面,设置节点的数据来源,SQL 语句取出 sales 表中所有的数据,如下图所示:

    示例表数据:sales.xlsx

    2)设置数据去向,将 sales 表中的数据同步到另一个数据库的表 salecopy 中,字段映射采用默认设置即可,如下图所示:

    3)保存这个任务即可。

    3.2 创建执行调用的任务

    1)创建一个 ETL 任务,重命名为任务1,并将一个「调用任务节点拖到设计界面,调用任务选择上面刚建好的任务2,任务2没设置参数,所以参数传递保持默认不勾选即可。

    2)将一个数据同步节点拖到设计界面,设置数据来源,SQL 语句对任务2生成的salecopy 表的数据进行处理,统计出每个城市的销售总和,如下图所示:

    3)如下图设置数据去向,使用自动建表将上面处理的数据保存到另一张表 staticsale 中去,字段映射采用默认设置即可。

    4)使用线条将数据同步节点跟它的上游调用任务节点连起来;实际生产环境中,此时需要设置任务1的调度配置,

    注意事项:由于当前案例中,任务2是被任务1调用的任务,所以任务2不需要设置调度配置,但是任务1需要设置调度配置,任务1每次执行会顺便拉起任务2的执行。

    3.3 运行任务

    1)点击右上角保存并运行,保存运行该任务,日志处出现执行成功信息表示任务成功运行,如下图所示:

    2)可以看到数据库中多了一张任务1数据同步节点生成的结果表 staticsale,城市销售总和数据已经存到该表中。

    4. 注意事项

    4.1 参数名冲突

    子任务里参数可能会跟父任务传递过来的参数产生同名冲突的情况,当参数名重复时子任务各参数优先级如下:

    参数赋值>父任务的参数赋值>父任务的任务参数>任务参数>系统参数

    4.2 任务调度冲突

    父任务和子任务都设置了调度,如果父任务执行时,子任务正在运行,此时父任务触发子任务,则会进入排队等待状态。

    Attachment List


    Theme: 数据开发
    前の記事
    次の記事
    • いいね
    • 良くない
    • 閲覧しただけ

    フィードバック

    鼠标选中内容,快速反馈问题

    鼠标选中存在疑惑的内容,即可快速反馈问题,我们将会跟进处理。

    不再提示

    10s后关闭

    反馈已提交

    网络繁忙