`
zongxing
  • 浏览: 18245 次
  • 性别: Icon_minigender_1
  • 来自: 广州
最近访客 更多访客>>
社区版块
存档分类
最新评论

oracle大数据量操作

阅读更多

到底要多大的表空间才够用呢?

使用一个java的job调用sqlLoader导入txt文件中的数据到oracle9i中。

sqlLoader进行导入。

txt文件大小6G多,每行对应oracle表中的一条数据,共5列,大约有1亿多条不到2亿数据。

-------------------------------------------------------------------------------------------------

第一次导入:

由于一个oracle中有多个用户,当前用户xxx_da的表空间设置较小,回滚段大小也未特别设置。

 

结果:导入失败。

原因:xxx_da表空间用尽

-------------------------------------------------------------------------------------------------

第二次导入:

增大xxx_da的表空间到20G,此盘的空间已经全部给了xxx_da的表空间

在导入过程中发现磁盘空间有足,立刻清除其他文件,节余出3G多的空间。

结果:导入失败。

原因:xxx_da表空间用尽,回滚段表空间也用尽。

-------------------------------------------------------------------------------------------------

第三次导入:

-------------------------------------------------------------------------------------------------

第四次导入:

申请一个专用的机器安装oracle,整个磁盘有70G的空间供此次导入任务使用。

表空间设置为20G,用尽后可以自动增加300M,最大可用32G。不产生日志。

回滚段设置为30G(实际使用的是一个2G的回滚段,30G的由于未重启oracle所以未能使用)。

结果:导入失败。

xxx_da表空间用尽,回滚段表空间正常。

分享到:
评论
3 楼 zongxing 2009-03-13  
titanfoot 写道

感觉楼主初生牛犊啊------------------用Java导6G的数据库文件。物尽所有,用正确的方法或变通的方法,完成自己的工作。

下面一行解释了,是sqlLoader进行导入。
第五次导入:已经查查明是sqlLoader的参数配置有问题,至于为什么有问题,现在正在测试,如果有了结果会公布出来。
2 楼 yyjava 2009-03-12  
继续努力。
1 楼 titanfoot 2009-03-12  
感觉楼主初生牛犊啊------------------用Java导6G的数据库文件。


物尽所有,用正确的方法或变通的方法,完成自己的工作。


相关推荐

    Oracle 大数据量操作性能优化

    Oracle 大数据量操作性能优化 Oracle大数据量操作性能优化是指在处理大量数据时,如何提高 Oracle 数据库的性能。该优化技术涉及到多个方面,包括分区、Direct Insert、并行和排序处理等。 分区是 Oracle 中的一种...

    Oracle 大数据量操作优化

    ### Oracle大数据量操作优化 在面对Oracle数据库中的大数据量操作时,如何有效地提升操作性能成为了一个重要的课题。本文将从不同角度出发,详细介绍如何通过多种技术手段和策略优化Oracle数据库的大数据量操作。 ...

    Oracle 大数据量操作优化.pdf

    在实际操作中,应根据具体业务需求和系统环境,结合上述策略进行优化,确保Oracle数据库在处理大数据量操作时保持高效运行。同时,优化SQL语句也是提升性能的关键,例如避免全表扫描、使用合适的连接方式、减少子...

    Oracle大数据量操作优化

    Oracle大数据量操作优化

    Oracle大数据量导入(CSV导入)

    Oracle数据库在处理大数据量导入时,常常需要高效且可靠的方法,以确保数据的快速加载和系统的稳定运行。这篇博文“Oracle大数据量导入(CSV导入)”将深入探讨如何使用Oracle的各种工具和技术来导入CSV(逗号分隔值)...

    基于Oracle的大数据量删除操作性能分析.pdf

    “基于Oracle的大数据量删除操作性能分析” 本文主要讨论基于Oracle的大数据量删除操作性能分析,旨在解决大数据量删除操作中的性能问题。文章通过分析和比较,证明了在Oracle数据库中,使用rowid删除具有最优的...

    oracle大数据量的系统的数据库结构如何设计

    Oracle数据库在处理大数据量时,其结构设计至关重要,因为正确的设计可以显著提升系统性能和效率。以下是一些关键的设计策略: 1. **表的横向和纵向切分**:横向切分是将表按照数据的使用频率进行分离,将频繁查询...

    Oracle插入大量数据

    根据给定文件的信息,“Oracle插入大量数据”的主题围绕着几种有效的策略展开,旨在提升Oracle数据库在大数据量场景下的性能表现。 ### 高速存储设备的应用 首先提及的是采用高速的存储设备来提升读写能力。EMC和...

    从SQLServer迁移大批量数据到Oracle

    本文将详细介绍从 SQL Server 迁移大批量数据到 Oracle 的方法和具体的操作步骤。 #### 关键技术与工具 - **SQL Server**: 微软开发的关系型数据库管理系统。 - **Oracle**: 甲骨文公司提供的高性能关系型数据库...

    oracle大数据量处理方案资料搜集

    12. **闪回技术**:Oracle的闪回功能允许恢复到特定时间点,这对于大数据量误操作的恢复非常有用。 综上所述,处理Oracle大数据量涉及多个层面,包括数据库架构设计、索引策略、并行处理、查询优化以及系统参数调...

    oracle千万级别数据简单操作

    ### Oracle千万级别数据简单操作详解 #### 一、创建表空间与分区表 在Oracle数据库中处理千万级别的数据时,合理的表空间管理和分区策略是非常重要的。以下是从给定的部分内容中提取的关键步骤: 1. **创建表空间...

    oracle分区技术-大批量数据操作.ppt

    oracle分区技术-大批量数据操作,优化处理,大数据量的处理

    oracle分区技术-大批量数据操作

    简单讲解了oracle分区技术-大批量数据操作

    plsql大数据量导出工具

    在Oracle数据库环境中,处理大数据量的表数据导出是一项挑战,特别是当数据达到百万或千万级别时。"plsql大数据量导出工具"是专为解决这类问题而设计的工具,它能有效地从Oracle数据库中导出大规模数据,并将其保存...

    oracle 数据仓库大批量数据处理技术.ppt

    在构建和管理Oracle数据仓库的过程中,对大批量数据的处理是一项关键任务。为了高效地处理大量数据,了解和掌握特定的技术至关重要。以下是一些核心知识点的详细解释: 1. **分区技术**:Oracle数据库提供了一种...

    D:\Oracle大批量删除数据方法

    综上所述,Oracle大批量删除数据时,应根据实际情况选择合适的策略,如分批删除和存储过程,以确保操作效率和数据安全性。同时,要注意对数据库的影响,采取必要的预防措施,以防止潜在的问题。

    Oracle_数据库中的海量数据处理

    - **管理大数据量**:通过优化存储结构和索引技术,实现对PB级别数据的有效管理。 - **管理各种用户请求**:无论是简单查询还是复杂分析任务,Oracle数据仓库都能高效处理。 - **查询快速响应**:利用先进的查询优化...

    Oracle2Oracle数据同步

    - **性能影响**:数据同步可能对数据库性能产生影响,因此在高峰时段或大数据量操作时需要谨慎。 - **安全**:确保同步过程中的数据安全,避免敏感信息泄露。 - **监控与故障恢复**:设置合适的监控机制,以便及时...

Global site tag (gtag.js) - Google Analytics