`
sito
  • 浏览: 44642 次
  • 性别: Icon_minigender_1
  • 来自: bj
社区版块
存档分类
最新评论

datastage 之 job sequence 应用

DB2 
阅读更多

1。随便准备两个job,我用的是前期做的两个server job,一个是db2数据分支清洗,二是文件读写job

2。新建一个job sequence,拖两个job activity,连接上。分别指定上述两个job (第一个job activity的triggers设为ok)

3。编译,然后在director管理器中运行,检验两个子job是否跑完。

附:此功能类似于后生 talend 的 tRunJob 组件,只不过 tRunJob 思想是父job与子job的概念,父子之间可以相互通信(包括传递全局变量值和返回结果等),这个更感觉是一个串联task,只有执行顺序之分,而 tRunJob 更有进程调度思想,资源被抢则被打断,等待子进程完成返回继续干活,理论上是可以无穷递归的

 

分享到:
评论

相关推荐

    Datastage8.5 官方培训文档

    IBM Information Server 是一套应用程序的集合,其中包括了DataStage,这些应用共享一个共同的存储库(默认情况下是 DB2),并且拥有一套共通的应用服务与功能。这些服务由元数据服务器组件提供,它们被托管在一个...

    datastage入门教程.docx

    Sequence Job 则用于协调多个 Job 的执行顺序,通过图形化方式定义 Job 间的逻辑关系和错误处理策略。 DataStage 支持多种数据源的连接,包括但不限于文本文件、XML 文件、企业应用(如 SAP、PeopleSoft 等)、各种...

    datastage etl 开发指南

    此外,还可以通过 DataStage 的 Job Control 功能来监控加载过程,确保数据加载的准确性和完整性。 ### 4. Job 设计与开发 在 DataStage 中,数据处理逻辑被组织成 Jobs。Job 由一系列操作(Operations)组成,...

    DataStage数据整合实例

    本文档包括三部分:第一部分主要介绍DataStage的提醒及其开发...第二部分主要介绍Job Sequence和Container的用法,并附有实例;第三部分主要介绍RTI Job,并附有实例。对于正在学习DataStage的新人,无疑是难得的资料。

    datastage学习笔记

    - DataStage的工作流称为Job,由多个Stage组成,每个Stage负责特定的ETL任务。在Designer中,需要配置Job参数,包括常规参数(如Job名称、描述、执行路径等)以及系统参数。系统参数可能包括数据库连接信息、错误...

    DataStage学习版文档V0_4.pdf

    4. **数据转换**:DataStage提供了丰富的数据转换组件,如Transformer、Calculator、Sequence Generator等。文档会介绍如何使用这些组件进行数据清洗、类型转换、规则应用和错误处理。 5. **并行处理**:DataStage...

    商业智能开发案例(BI)2

    在本文中,我们将介绍一个同时处理多个数据源和目标的 ETL Job 的开发过程,并了解 DataStage 中 Container 和 Job Sequence 的用法。 Job Sequence 的用法 在用 IBM WebSphere DataStage 进行数据整合的过程中,...

    datastage 认证考试

    3. **数据转换**:掌握DataStage中的转换组件,如String、Numeric、Date等函数的应用,以及Sequence Generators、Joiner、Filter、Aggregator等操作的使用。 4. **数据质量**:了解DataStage中的数据清洗和验证工具...

    Datastage开发经验.pdf

    本开发经验主要涵盖了Datastage的连接配置、Designer开发、Job和Sequence的创建与运行,以及参数和存储过程的调用等关键环节。 一、Datastage连接配置 配置DS连接是使用Datastage的第一步。在配置过程中,需要指定...

    DataStage入门进阶学习资料

    本套学习资料涵盖了DataStage的基础知识到高级应用,对于想要掌握这款软件的用户来说是一份宝贵的资源。 在《DataStage资料.doc》中,你可能会找到以下知识点: 1. **DataStage简介**:了解DataStage的基本概念,...

    datastage function

    2. Parallel Sequence Job中的Joiner和Aggregator函数:用于在并行处理环境中合并和聚合数据。 通过熟练掌握和应用这些函数,可以极大地提高DataStage项目的设计效率和数据处理能力。在实际工作中,应根据具体业务...

    datastage面试300题

    4. **管道并行性**:DataStage的并行处理机制之一,允许数据在不同阶段之间并行流动,提高处理速度。 5. **调试并行执行器(PX)**:在并行执行器中设置断点,逐行查看数据以诊断问题。 6. **去除数据集中的重复行**...

    DataStage进行数据整合第2部分

    - 弹出保存对话框,如图3所示,在“Job name”中输入名称(例如:SampleJobSequence),在“Category”中输入分类名(例如:sequence)。 3. **添加JobActivity**: - 从左侧的Sequence面板中选择JobActivity,并将...

    DataStage初级培训资料

    DataStage 提供多种 Stage 类型,如源 Stage、转换 Stage 和目标 Stage,以及 JOB 类型和 Sequence 类型,用于定义不同级别的流程控制。 4. DataStage Designer 主要功能 - ETL Job 开发:提供丰富的预定义组件,...

    DataStage学习版文档V0.67

    - **5.4.3 DataStage Design 环境介绍 (Parallel Job 部分)** - **Parallel Job 概述**:并行作业的特点和优势。 - **基本的 Parallel Job 开发**:构建并行作业的基本步骤。 ##### 5.5 DataStage Manager - **...

    IBM Datastage 并行作业开发者指南简体中文版

    文档详细介绍了DataStage的各个组成部分,如作业(job)、阶段(stage)、序列(sequence)、链接(link)和转换(transform)等,并会向开发者展示如何在开发过程中使用这些组件。这些组件在逻辑上组织作业,使得...

    DataStage学习指导_CN

    - DataStage是一个企业级的数据集成平台,支持大规模数据处理,广泛应用于数据仓库建设和大数据分析。 - 它提供了图形化的界面,使得数据流的设计和维护变得更加直观和易于理解。 2. **DataStage的主要组件** - ...

    DataStage IBM-面试题

    #### 二、Parallel Job 与 Sequence Job 的区别 - **Parallel Job**(并行作业) - 运行平台:通常在 UNIX 或 Linux 平台上运行。 - 执行模式:可在多个节点上同时执行,实现真正的并行处理。 - 特点:能够处理...

    ETL DataStage实现

    此外,DataStage还提供了作业序列(Job Sequence)来管理作业间的依赖关系,以及基本语言用于自定义函数,甚至可以调用外部脚本语言来处理复杂任务。调度功能确保作业按预定时间执行,同时还包括数据源管理和调试...

    DataStage V7.5 学习总结讲解学习.pdf

    2. **Sequence Job Builder**:用于构建顺序执行的作业,适合处理较小规模或有依赖关系的数据处理任务。 3. **Transformer Developer**:提供了一种可视化方式来设计复杂的转换逻辑,如字段映射、数据清洗、数据...

Global site tag (gtag.js) - Google Analytics