`
wxwx1215
  • 浏览: 30979 次
  • 性别: Icon_minigender_1
  • 来自: 南京
社区版块
存档分类
最新评论

DB2导入大数据量时遇到问题

    博客分类:
  • DB2
 
阅读更多
一般导DB2数据时,直接就使用load的方法,很是方便,但最近到一张很大的表的数据大概3个多G,导了一天一夜都没反应,然后就是各种纠结。。。,还好最后找到解决方法了
方法如下:
db2 "import FROM 'xxxx.txt' OF DEL MODIFIED by compound=100 commitcount 10000 insert INTO  <table_name>"


参数:compound (范围0-100)
     commitcount < 30000

分享到:
评论

相关推荐

    datax数据迁移插件-db2writer

    - 性能调优:根据实际数据量和硬件资源,调整DB2Writer的并行度,平衡迁移速度和系统负载。 - 安全策略:在迁移过程中,应考虑数据安全,如使用SSL加密传输,设置合适的访问权限。 6. 结语 DB2Writer插件是DataX...

    如何将AS/400 DB2数据导入Access

    根据数据量的大小,这可能需要一段时间。一旦完成,你可以在Access中查看和操作这些导入的数据。 7. **数据同步和维护**: 请注意,导入的数据是一次性的,除非你设置定期同步或触发器,否则AS/400上的更新不会...

    Db2 文件导入导出常见命令总结

    - **CREATE**:创建新表并导入数据,仅支持PC/IXF文件。 - **INSERT**:向已存在的表中插入数据。 - **INSERT_UPDATE**:插入数据或更新匹配主键的现有记录。 - **REPLACE**:删除表中所有数据后插入新数据。 -...

    datax数据从hive导入mysql数据缺失解决

    具体表现为,在某些特定条件下(如数据块大小超过 256M 时),导入到 MySQL 的数据量少于预期。 #### 现象分析 根据观察发现,当数据块的大小超过 256M 时,会出现数据缺失的现象。这提示我们需要关注 Hive 中关于...

    DB2 数据迁移

    在进行DB2数据迁移的过程中,可能会遇到各种问题,以下是一些常见的问题及其解决方案: - **迁移过程中数据损坏**:确保在迁移前对源数据库进行了完整备份;使用可靠的迁移工具和方法。 - **迁移时间过长**:优化...

    DB2 技巧.doc

    DB2技巧文档主要涵盖了数据导入导出、性能调整、字符集、参数调整以及常见问题的解决方案,这些都是DB2数据库管理中的关键环节。 一、数据的导入导出 数据的导入导出是数据库管理中的基础操作,DB2提供了多种工具如...

    DB2数据库基本操作手册

    使用import命令导入数据时,可以指定插入数据的表模式和表名,并且能够设置导入操作的一些特定参数,例如,强制中间提交和重复数据的处理方式。db2move的import选项与export类似,同样可以通过指定不同的导入选项来...

    DB2 GBK 字符集解决方案.zip

    在高数据量场景下,需要权衡存储成本和字符集需求。 10. **备份与恢复** - 备份和恢复过程中,字符集配置的正确传递是确保数据完整性的关键。 通过上述步骤和注意事项,我们可以成功地在DB2环境中实施GBK字符集...

    db2数据迁移

    - `insert_update`:如果导入数据的主键与表中已存在,更新数据,否则追加。 - `replace`:删除表中所有数据,然后插入文件数据,因此在使用前最好备份。 4. **load**: `load` 命令用于批量加载大量数据,通常...

    DB2异常SQLCODE信息

    - **+46401609**:大数据量输入超过系统限制,可能是在批量数据导入或复杂查询时遇到的问题。 - **+46601610**:指示大量数据输入的操作未成功,可能与资源限制或数据格式有关。 - **+49401614**:关联定位器...

    db2 Load锁表 后解锁详解

    ### DB2 Load锁表后解锁详解 #### 一、引言 在数据库管理与维护过程中,数据加载(Load)操作是常见的数据导入...遵循这些步骤能够帮助DBA或数据库管理员在遇到类似问题时迅速解决问题,保障业务连续性和数据完整性。

    db2 数据库连接jar包

    没有这个文件,即使有db2jcc.jar,Java应用程序也无法成功连接到DB2数据库,因为会遇到许可证问题。这个文件通常不需要程序员进行编程操作,但在部署应用程序到生产环境时,确保它的存在是非常关键的。 在实际开发...

    DB2 的命令行处理器和脚本编写

    - `db2 export`和`db2 import`:数据导出和导入功能。 - **参数和选项**:命令行中的参数和选项可以对命令行为进行更精确的控制,例如 `-v` 用于显示详细信息,`-h` 显示帮助文档。 2. **脚本编写** - **使用...

    IBM内部关于DB2数据库的中文翻译版资料

    4. **故障排除**:提供了常见问题的解决方法,帮助用户在遇到问题时能够快速定位并解决问题。 5. **参考材料**:附录中包含了各种参考资料,如命令行参考、错误代码解释等,便于用户查阅。 ### 版权信息 文档末尾...

    深入理解DB2 INSERT内部机制以及表空间分配机制-contracted.doc

    本文将以一个真实的案例为引子,揭示当数据量不变但表空间使用量激增的现象,探讨其背后的原理,并通过实验验证来深化对这一问题的理解。 一次周末,某业务系统的表空间在未导入大量数据的情况下,使用量却突然增加...

    DB2使用经验积累及心得

    ### DB2使用经验积累及心得 #### 前言 本文档主要总结了在首都国际机场、海口梅兰国际机场系统的开发过程中...以上总结了在实际项目中遇到的各种DB2使用经验和技巧,旨在帮助开发者更好地理解和应用DB2数据库技术。

    DB2唯一免费版入门

    这个免费版本包含了大部分商业版DB2的功能,如SQL支持、事务处理、安全性、数据仓库等,但对CPU数量和内存大小有一定限制,适合于开发、测试和轻量级生产环境。它支持Windows、Linux和Unix等多种操作系统,具有良好...

    DB2表相关操作的文档二三事儿

    当遇到表空间不足的问题时,可以通过增加新的表空间来解决。具体操作如下: 1. 创建新的表空间。 2. 增加相应的缓冲池。 3. 在新建的表空间上建立表。 ##### 13. 查看锁表情况 ```bash db2 "get snapshot for locks...

    Db2数据库损坏的修复过程.docx

    这种方法涉及在新的硬件上重建数据库环境,然后使用db2look导出原数据库的定义,并用db2dart导出和导入数据。这种方法适用于大规模数据的恢复,但时间成本较高。 6. Db2dart工具: Db2dart是Db2数据库的一个重要...

Global site tag (gtag.js) - Google Analytics