`
taiwei.peng
  • 浏览: 234412 次
  • 性别: Icon_minigender_1
  • 来自: 深圳
社区版块
存档分类
最新评论

ETL

    博客分类:
  • java
 
阅读更多

1.在D 视图下创建 数据源

  在工具栏中找到source 然后参照文档弄源表和目标表

  000_Sample找到Mapping“M_for_copy”并将其拖拽到目标文件夹,

  把源表拖入到右边的空白中。

 

2.在D 视图下将文件夹“000_Shared”

  下的Mapping“M_GetParam”,“M_getSessionRunStatus”拖拽到目标文件夹

 

3.在W 视图下“000_Sample”,找到Workflow“WF_for_copy”

   并将其拖拽到目标文件夹,修改名称并设置属性

 

4.在W 视图下将文件夹“000_Sample”

  下的Session “pre_S”,“post_S”拖拽到新建的文件夹中

 

5.在W视图下修改Assignment 的target owner和table,修改session(不是pre_s 和post_s)

  的source 和target 的数据源和Source Table Name。 

 

6.修改session的 Target table name:$$TARGET_OWNER.$$TARGET_TABLE

 

7.在W 视图下创建Sesssion 选择mapping 

  注意pre和post 的默认session 要和S 的默认session 一致,不然会报错。

 

分享到:
评论

相关推荐

    Java分布式ETL框架

    Java分布式ETL(Extract, Transform, Load)框架是用于大数据处理的一种关键技术,它涉及从各种数据源抽取数据,经过转换处理后,加载到目标存储系统的过程。在Java中,实现分布式ETL可以利用多线程、分布式计算以及...

    传统数据仓库ETL设计报告

    ETL平台分为三个主要模块:ETL元数据驱动模块负责根据配置信息生成ETL作业,ETL调度模块配置调度并结合数据质量校验控制执行,而ETL元数据管理模块则用于管理和检索ETL配置信息。 2.1.2.2 ETL平台技术架构 技术...

    ETL Automation 使用手册 Version 2.6.0 中文

    ETL Automation 使用手册 Version 2.6.0 中文 ETL Automation 是一个数据集成平台,旨在提供一个自动化的数据集成解决方案。下面是对 ETL Automation 使用手册 Version 2.6.0 中文的详细知识点解释。 ETL ...

    ETL Automation使用手册

    ETL Automation 使用手册 ETL Automation 是一个自动化的数据集成工具,旨在帮助用户快速高效地完成数据提取、转换和加载(ETL)过程。本手册将详细介绍 ETL Automation 的安装、配置、使用和管理。 ETL ...

    达梦ETL批量流程向导

    ### 达梦ETL批量流程向导:详细解析与应用指南 #### 一、引言 随着企业数据规模的不断增长以及对数据处理效率要求的提高,ETL(Extract, Transform, Load)技术成为了现代数据仓库建设中的核心环节之一。其中,...

    ETL工具 ,基于Kettle实现的Web版ETL工具

    ETL(Extract, Transform, Load)是数据仓库和大数据处理中的关键步骤,它涉及从不同来源提取数据,对其进行转换以适应特定需求,然后加载到目标系统。Kettle是一款开源的ETL工具,由Pentaho公司开发,因其强大的...

    ETL工具,开源,使用需要配置

    ETL(Extract, Transform, Load)是数据仓库领域中的关键过程,用于从各种源系统抽取数据,转换数据以满足特定需求,然后加载到目标数据库或数据仓库中。在这个主题中,我们将深入探讨ETL工具的开源特性以及配置使用...

    ETL架构师面试题.docx

    ETL架构师在数据仓库项目中扮演着至关重要的角色,负责设计和实施数据从源系统到数据仓库的高效、准确的转换流程。本篇主要讨论了几个与ETL架构师面试相关的知识点,包括逻辑数据映射、数据探索阶段、起始来源数据的...

    数据仓库ETL算法详解

    1. ETL的定义:是数据抽取(Extract)、转换(Transform)、清洗(Cleansing)、装载(Load)的过程。是构建数据仓库的重要一环,用户从数据源抽取出所需的数据,经过数据清洗,最终按照预先定义好的数据仓库模型,将数据...

    1、ETL工程师经典面试题.md

    5. 在 ETL过程中四个基本的过程分别是什么? 6. 从 ERP源系统中抽取数据最好的方法是什么? 7. 简述直接连接数据库和使用 ,ODBC连接数据库进行通讯的优缺点。 8. 什么是代理键?简述代理键替换管道如何工作。 9. ...

    面试ETL题总汇

    ### ETL面试题总汇知识点解析 #### 一、逻辑数据映射 **知识点1: 逻辑数据映射定义及作用** 逻辑数据映射(Logical Data Mapping)是一种用于描述源系统数据定义、目标数据仓库模型及其转换过程的技术文档。它是...

    支持国产ETL etl-engine 用go写的轻量级etl引擎 方便集成到各企业中

    【etl-engine】是一款由国内开发者使用Go语言编写的轻量级ETL(Extract, Transform, Load)引擎,旨在帮助用户快速构建ETL解决方案,降低集成到现有项目或产品生态中的技术门槛。它包含了三个主要组件:etl-engine...

    ETL系列专题2 ETL数据结构

    在ETL(抽取、转换、加载)过程中,数据结构的设计尤为重要,因为它直接影响ETL的性能、效率和可靠性。本章节将详细介绍数据结构的概念和在ETL中的应用,尤其是ETL架构设计中Staging Area(暂存区)的原则和常用数据...

    《ETL数据整合和处理》教学大纲.pdf

    《ETL数据整合和处理》课程是一门针对大数据技术类专业的必修课,旨在培养具有实战经验的大数据处理和分析人才。课程总学时为64学时,其中包括30学时的理论教学和34学时的实验操作,总计4.0学分。课程的核心目标是让...

    oracle,etl工程师--面试题锦集

    Oracle和ETL(Extract, Transform, Load)是IT行业中数据处理和数据库管理的两个关键领域。作为一位ETL工程师,你需要对数据的提取、转换和加载过程有深入的理解,并且熟悉Oracle数据库系统。以下是一些关于这两个...

    The Data WarehouseETL Toolkit: Practical Techniques for

    在数据仓库领域,ETL(提取、转换、加载)过程是至关重要的环节。数据在成为信息之前,必须从各种来源中提取出来,经过清洗和整合,最后加载到数据仓库中。Ralph Kimball,作为全球数据仓库权威,与Joe Caserta共同...

    使用ETL把EXCEL导入到MySQL,并处理乱码问题

    ### 使用ETL将Excel导入MySQL并处理乱码问题 在数据处理领域,ETL(Extract, Transform, Load)工具被广泛应用于数据集成过程中,用于从不同的数据源提取数据、转换数据格式以及加载到目标系统中。本文将详细介绍...

    ETL规范.doc

    ETL 规范设计指南 ETL(Extract、Transform、Load)是数据集成的重要步骤,涉及到数据的抽取、转换和加载。为了确保 ETL 过程的高效性和可靠性,需要制定相应的规范和标准。本文档旨在提供一份完整的 ETL 规范设计...

    ETL详解.docx

    ETL 与大数据的关系紧密,因为大数据的处理往往涉及大量、多样化的数据整合,而这正是 ETL 技术的核心应用。随着大数据技术的发展,传统的 ETL 过程已经不能满足实时或近实时的数据处理需求。大数据环境下的 ETL ...

    ETL过程的概念建模

    ### ETL过程的概念建模 #### 概述 在当今数据驱动的世界中,企业需要有效管理海量数据以支持决策制定。数据仓库作为一种重要的数据分析工具,其构建与维护涉及多个复杂步骤,其中最关键的一环就是ETL(Extract-...

Global site tag (gtag.js) - Google Analytics