`
hyjun
  • 浏览: 51218 次
  • 性别: Icon_minigender_1
  • 来自: 广州
社区版块
存档分类
最新评论

oracle的LoadData性能

Oracle 
阅读更多

Oracle 官方文档说明:如果用OWB进行Load Data理论值是100G/小时,对于我们目前每天数据量为1T(即10 * 100G),则LOAD到OWB中需要10小时,这样的性能远远不能满意我们目前的需要.

经过近来的测试与分析有以下几点可以提高,使Load Data速度达到140G/小时或更高,

1.用二或三个客户端同时进行Load Data,从而并行处理,此时Oracle不会进行Lock 表,可以放心.

2.设置sqlldr的LoadData参数,如把parallel设置为true,以及direct也设置为true,当然可以按硬件的性能设置readsize与streamsize的大小.

3.把LoadData的表分别存储于不同的磁盘上.这样在IO上不能出现堵塞,而且速度还非常快.

 

大家对大数量处理有没有好的建议,欢迎回复

 

0
顶
1
踩
分享到：
| 解决ROSE关闭后报MEM-BAD-POINTER错.
评论
发表评论

您还没有登录,请您登录后再发表评论

相关推荐

    oracle.dataaccess.dll

    2. “Could not load file or assembly 'Oracle.DataAccess' or one of its dependencies.”：确保Oracle.DataAccess.dll已正确安装，并在项目中添加引用。 3. “The provider is not compatible with the version ...

    Oracle Autonomous Data Warehous(ADW)操作手册.docx

    Oracle Autonomous Data Warehouse (ADW) 是Oracle云服务中的一款完全托管的数据仓库解决方案，它提供了高效、自动化的数据处理和分析能力。本操作手册将引导您完成在Oracle Cloud Infrastructure (OCI) 上搭建和...

    dataload程序及使用说明

    `dataload` 是一个高效的数据录入工具，主要针对Oracle数据库系统设计，但同样适用于其他类型的数据库。它的核心功能是通过模拟键盘输入的方式，将大量数据批量导入到数据库中，大大提高了数据录入的效率和准确性。...

    oracle load命令与ctl写法

    ### Oracle Load 命令与 CTL 文件写法详解 #### 一、Oracle Load 命令简介 在Oracle数据库管理中，将外部数据文件导入到数据库表中的过程是非常常见的操作。Oracle提供了多种方法来实现这一目标，其中`LOAD`命令...

    mysql和Oracle性能比较.pdf

    SELECT或LOAD DATA INFILE。具体的性能差异往往取决于具体的使用场景和数据量大小。 2. **UPDATE操作**：Oracle数据库中，UPDATE操作涉及到的行锁定机制与MySQL相比可能更为精细，这在高并发情况下尤其明显。...

    Oracle_data_warehouse.rar_ 数据仓库_Data Warehouse orac_oracle_wareh

    5. Oracle Advanced Analytics：Oracle提供了强大的高级分析功能，如Oracle Data Mining、Oracle R Enterprise等，支持预测建模、聚类、关联规则等，帮助用户从大量数据中发现有价值的信息。 6. 分区技术：为了提高...

    Oracle整体性能获取工具.pdf

    AWRDD（AWR Data Dictionary）报告是 Oracle 数据库中的一种性能分析工具，能够帮助用户了解数据库的历史性能信息，包括不同的时段的性能报告、Load Profile、等待事件、Top SQL 等信息。AWRDD 报告可以通过执行 ...

    Oracle Database 10g Data Warehousing(数据仓库)

    - **数据源集成**：Oracle 10g 提供ETL（Extract, Transform, Load）工具，用于从多种异构数据源抽取、转换和加载数据。 - **数据清洗**：数据仓库建设过程中，数据质量至关重要，Oracle 10g 提供了数据清洗和验证...

    DataLoad Professional

    3. 数据加载：对于Oracle数据库，DataLoad Professional利用了Oracle的高级特性，如Direct Path Load、External Tables等，能快速且有效地将数据批量插入到表中，大大提高了数据加载速度。同时，它支持并发加载，...

    Oracle-data-imp-exp.rar_oracle_oracle exp imp

    Oracle 提供了两个主要的实用工具：`expdp`（Export Data Pump）和`impdp`（Import Data Pump），用于高效地完成数据的导出与导入操作。 **expdp** 是Oracle Data Pump Export的命令行工具，它能够快速地将数据库...

    DATALOAD 最新版本5.4

    总结起来，DATALOAD 5.4.1.0是Oracle EBS实施中的一款强大工具，它的更新带来了性能提升、错误处理改进以及用户体验优化。无论是在系统初始化、升级还是日常运维中，DATALOAD都能显著提升数据管理的效率，助力企业...

    Oracle数据库性能测试软件swingbench

    Oracle数据库在IT行业中扮演着重要的角色，而对数据库性能的评估和优化是其高效运行的关键。Swingbench作为Oracle公司推出的性能测试工具，为数据库管理员和开发者提供了强大的测试能力。这款由Java语言编写的软件...

    Oracle 11gR2 2 Day Data Warehouse Guide

    - **数据泵导入导出工具**（Data Pump Import/Export）：简化大型数据集的移动过程。 #### 三、构建数据仓库的关键步骤 本书详细介绍了构建Oracle数据仓库的主要步骤，包括但不限于： 1. **需求分析**：明确数据...

    Wiley.Oracle.Data.Warehousing.and.Business.Intelligence.Solutions.Jan.2007

    Oracle还提供了数据集成工具，如Oracle GoldenGate和Oracle Data Integrator，用于高效地从各种数据源提取、转换和加载数据到数据仓库中。 ### 《Oracle数据仓库与商业智能解决方案》内容概览 本书分为几个主要...

    oracle.data.warehouse.management

    - **索引组织表 (Index-Organized Tables, IOTs)**：在 Oracle 中，这种类型的表可以提高查询性能，尤其是在频繁执行范围查询时。 - **压缩 (Compression)**：减少数据占用的空间，从而节省存储成本并提高查询性能。...

    Oracle Database warehousing guide

    1. **高性能查询**: Oracle数据库提供了强大的查询优化器和并行处理能力，确保即使在大量数据上也能快速响应复杂的查询。 2. **分区**: 通过将大型表分割成更小的、管理更简单的部分，可以显著提高查询性能。 3. **...

    DataLoad v4.2.zip

    再者，DataLoad v4.2还特别针对Oracle数据库进行了优化，使其在处理Oracle数据录入时表现得更为出色。Oracle数据库因其强大的性能和广泛的应用而备受青睐，但手动录入数据往往费时费力。DataLoad的出现，使得这一...

    DataLoad_help

    Oracle DataLoad 帮助文档 Oracle DataLoad 是一款强大的数据加载工具，主要用来高效、安全地将大量数据导入到 Oracle 数据库中。它提供了两种版本：Classic 和 Professional，以满足不同用户的需求。 1. **Data...

    oracle导入表导入数据实例

    Oracle还提供了其他数据导入工具，如`LOAD DATA INFILE`语句（在SQL*Plus中直接执行）、`DBMS_LOB`包（PL/SQL编程方式）以及Data Pump（`expdp`和`impdp`），它们各有适用场景，选择哪种方法取决于数据量、性能需求...

Magicbox
Global site tag (gtag.js) - Google Analytics