设置总调度任务

  • 文檔創建者:Roxy
  • 編輯次數:2
  • 最近更新:Roxy 于 2022-08-17
  • 1. 概述

    数仓调度场景案例给出了整体的调度方案,本文将为你介绍如何设置总的数仓调度任务。

    三个层级的数仓都已经设置完成,接下来就可以将 ODS、DW、DM 层的调度任务进行组合,通过调用任务的形式组合在一个任务中,方便后续的任务管理和触发。

    2. 操作步骤

    2.1 设置总调度任务并记录更新日志

    创建一个任务「调度总任务」,同设置DW层任务一致,为了便于记录数据更新的日志,因此需要获取任务开始时间并将其设置为参数,当任务开始执行的时候就记录当前时间至更新日志中,如下图所示:

    然后分别使用调用任务的形式将ODS层DW层DM层创建的三个数仓调度任务进行调用,如下图所示:

    然后记录调度任务执行结束的时间,并设置为参数,如下图所示:

    通过SQL脚本将时间写入准备好的日志数据表 logs 中,如下图所示:

    2.2 设置消息通知

    设置消息通知,若执行成功,则通知执行成功的步骤,如下图所示:

    2.3 设置调度配置

    为了便于任务的定时执行,可以设置调度任务每周执行一次,实现定时同步调度,如下图所示:

    附件列表


    主題: 最佳实践
    已經是第一篇
    已經是最後一篇
    • 有幫助
    • 沒幫助
    • 只是瀏覽
    • 评价文档,奖励 1 ~ 100 随机 F 豆!

    滑鼠選中內容,快速回饋問題

    滑鼠選中存在疑惑的內容,即可快速回饋問題,我們將會跟進處理。

    不再提示

    10s後關閉

    獲取幫助
    線上支援
    獲取專業技術支援,快速幫助您解決問題
    工作日9:00-12:00,13:30-17:30在线
    頁面反饋
    針對當前網頁的建議、問題反饋
    售前咨詢
    業務咨詢
    電話:0933-790886或 0989-092892
    郵箱:taiwan@fanruan.com
    頁面反饋
    *問題分類
    不能為空
    問題描述
    0/1000
    不能為空

    反馈已提交

    网络繁忙