`
独善其身008
  • 浏览: 171347 次
  • 性别: Icon_minigender_2
  • 来自: 苏州
文章分类
社区版块
存档分类
最新评论

十大DB2数据库优化技巧

阅读更多
 为了帮助 DB2 DBA 避免性能灾难并获得高性能,我为我们的客户、用户和 DB2 专家同行总结了一套故障诊断流程。以下详细说明在 Unix、Windows 和 OS/2 环境下使用 DB2 UDB 的电子商务 OLTP 应用程序的 10 条最重要的性能改善技巧 - 并在本文的结束部分作出 总结。
  每隔大约几个星期,我们就会接到苦恼的 DBA 们的电话,抱怨有关性能的问题。“我们 Web 站点速度慢得像蜗牛一样”,他们叫苦道,“我们正在失去客户,情况严重。你能帮忙吗?”为了回答这些问题,我为我的咨询公司开发了一个分析流程,它能让我们很快找到性能问题的原因,开发出补救措施并提出调整意见。这些打电话的人极少询问费用和成本 - 他们只关心制止损失。当 DB2 或电子商务应用程序的运行不能达到预期的性能时,组织和财务的收益将遭受极大的损失。
  10. 监视开关
  确保已经打开监视开关。如果它们没有打开,您将无法获取您需要的性能信息。要打开该监视开关,请发出以下命令:
  db2 "update monitor switches using
  lock ON sort ON bufferpool ON uow ON
  table ON statement ON"
  9. 代理程序
  确保有足够的 DB2 代理程序来处理工作负载。要找出代理程序的信息,请发出命令:
  db2 "get snapshot for database manager"
  并查找以下行:
  High water mark for agents registered = 7
  High water mark for agents waiting for a token = 0
  Agents registered= 7
  Agents waiting for a token= 0
  Idle agents= 5
  Agents assigned from pool= 158
  Agents created from empty Pool = 7
  Agents stolen from another application= 0
  High water mark for coordinating agents= 7
  Max agents verflow= 0
  如果您发现Agents waiting for a token或Agents stolen from another application不为 0,那么请增加对数据库管理器可用的代理程序数(MAXAGENTS 和/或 MAX_COORDAGENTS取适用者)。
  8. 最大打开的文件数
  DB2 在操作系统资源的约束下尽量做一个“优秀公民”。它的一个“优秀公民”的行动就是给在任何时刻打开文件的最大数设置一个上限。数据库配置参数 MAXFILOP约束 DB2 能够同时打开的文件最大数量。当打开的文件数达到此数量时,DB2 将开始不断地关闭和打开它的表空间文件(包括裸设备)。不断地打开和关闭文件减缓了 SQL 响应时间并耗费了 CPU 周期。要查明 DB2 是否正在关闭文件,请发出以下命令:
  db2 "get snapshot for database on DBNAME"
  并查找以下的行:
  Database files closed = 0
  如果上述参数的值不为 0,那么增加MAXFILOP的值直到不断打开和关闭文件的状态停埂J褂靡韵旅 睿?/P>
  db2 "update db cfg for DBNAME using MAXFILOP N"
  7. 锁
  LOCKTIMEOUT的缺省值是 -1,这意味着将没有锁超时(对 OLTP 应用程序,这种情况可能会是灾难性的)。尽管如此,我还是经常发现许多 DB2 用户用LOCKTIMEOUT= -1。将LOCKTIMEOUT设置为很短的时间值,例如 10 或 15 秒。在锁上等待过长时间会在锁上产生雪崩效应。
  首先,用以下命令检查LOCKTIMEOUT的值:
  db2 "get db cfg for DBNAME"
  并查找包含以下文本的行:
  Lock timeout (sec) (LOCKTIMEOUT) = -1
  如果值是 -1,考虑使用以下命令将它更改为 15 秒(一定要首先询问应用程序开发者或您的供应商以确保应用程序能够处理锁超时):
  db2 "update db cfg for DBNAME using LOCKTIMEOUT 15"
  您同时应该监视锁等待的数量、锁等待时间和正在使用锁列表内存(lock list memory)的量。请发出以下命令:
  db2 "get snapshot for database on DBNAME"
  查找以下行:
  Locks held currently= 0
  Lock waits= 0
  Time database waited on locks (ms)= 0
  Lock list memory in use (Bytes)= 576
  Deadlocks detected= 0
  Lock escalations= 0
  Exclusive lock escalations= 0
  Agents currently waiting on locks= 0
  Lock Timeouts= 0
  如果Lock list memory in use (Bytes)超过所定义LOCKLIST大小的 50%,那么在LOCKLIST数据库配置中增加 4k 页的数量。
  6. 临时表空间
  为了改善 DB2 执行并行 I/O 和提高使用TEMPSPACE的排序、散列连接(hash join)和其它数据库操作的性能,临时表空间至少应该在三个不同的磁盘驱动器上拥有三个容器。
  要想知道您的临时表空间具有多少容器,请发出以下命令:
  db2 "list tablespaces show detail"
  查找与以下示例类似的TEMPSPACE表空间定义:
  Tablespace ID= 1
  Name= TEMPSPACE1
  Type= System managed space
  Contents= Temporary data
  State= 0x0000
  Detailed explanation: Normal
  Total pages= 1
  Useable pages= 1
  Used pages= 1
  Free pages= Not applicable
  High water mark (pages)= Not applicable
  Page size (bytes)= 4096
  Extent size (pages)= 32
  Prefetch size (pages)= 96
  Number of containers= 3
  注意Number of containers的值是 3,而且Prefetch size是Extent size的三倍。为了得到最佳的并行 I/O 性能,重要的是Prefetch size为Extent size的倍数。这个倍数应该等于容器的个数。
  要查找容器的定义,请发出以下命令:
  db2 "list tablespace containers for 1 show detail"
  1 指的是tablespace ID #1,它是刚才所给出的示例中的TEMPSPACE1。
  5. 内存排序
  OLTP 应用程序不应该执行大的排序。它们在 CPU、I/O 和所用时间方面的成本极高,而且将使任何 OLTP 应用程序慢下来。因此,256 个 4K 页(1MB)的缺省SORTHEAP大小(1MB)应该是足够了。您也应该知道排序溢出的数量和每个事务的排序数。
  请发出以下命令:
  Db2 "get snapshot for database on DBNAME"
  并查找以下行:
  Total sort heap allocated= 0
  Total sorts = 1
  Total sort time (ms)= 8
  Sort verflows = 0
  Active sorts = 0
  Commit statements attempted = 3
  Rollback statements attempted = 0
  Let transactions = Commit statements attempted + Rollback
  statements attempted
  Let SortsPerTX= Total sorts / transactions
  Let PercentSortOverflows = Sort overflows * 100 / Total sorts
  如果PercentSortOverflows ((Sort overflows * 100) / Total sorts )大于 3 个百分点,那么在应用程序 SQL 中会出现严重的或意外的排序问题。因为正是溢出的存在表明发生了大的排序,所以理想的情况是发现没有排序溢出或至少其百分比小于一个百分点。
  如果出现过多的排序溢出,那么“应急”解决方案是增加SORTHEAP的大小。然而,这样做只是掩盖了真实的性能问题。相反,您应该确定引起排序的 SQL 并更改该 SQL、索引或群集来避免或减少排序开销。
  如果SortsPerTX大于 5 (作为一种经验之谈),那么每个事务的排序数可能很大。虽然某些应用程序事务执行许多小的组合排序(它们不会溢出并且执行时间很短),但是它消耗了过多的 CPU。当SortsPerTX很大时,按我的经验,这些机器通常会受到 CPU 的限制。确定引起排序的 SQL 并改进存取方案(通过索引、群集或更改 SQL)对提高事务吞吐率是极为重要的。
  4. 表访问
  对于每个表,确定 DB2 为每个事务读取的行数。您必须发出两个命令:
  db2 "get snapshot for database on DBNAME"
  db2 "get snapshot for tables on DBNAME"
  在发出第一个命令以后,确定发生了多少个事务(通过取Commit statements attempted和Rollback statements attempted之和 - 请参阅 技巧 3)。
  在发出第二个命令以后,将读取的行数除以事务数(RowsPerTX)。在每个事务中,OLTP 应用程序通常应该从每个表读取 1 到 20 行。如果您发现对每个事务有成百上千的行正被读取,那么发生了扫描操作,也许需要创建索引。(有时以分布和详细的索引来运行 runstats 也可提供了一个解决的办法。)
  “get snapshot for tables on DBNAME”的样本输出如下:
  Snapshot timestamp = 09-25-2000
  4:47:09.970811
  Database name= DGIDB
  Database path= /fs/inst1/inst1/NODE0000/SQL00001/
  Input database alias= DGIDB
  Number of accessed tables= 8
  Table List
  Table Schema= INST1
  Table Name= DGI_
  SALES_ LOGS_TB
  Table Type= User
  Rows Written= 0
  Rows Read= 98857
  Overflows= 0
  Page Reorgs= 0
  Overflows 的数量很大就可能意味着您需要重组表。当由于更改了行的宽度从而 DB2 必须在一个不够理想的页上定位一个行时就会发生溢出。
  3. 表空间分析
  表空间快照对理解访问什么数据以及如何访问是极其有价值的。要得到一个表空间快照,请发出以下命令:
  db2 "get snapshot for tablespaces on DBNAME"
  对每个表空间,回答以下问题:
  平均读取时间(ms)是多少?
  平均写入时间(ms)是多少?
  异步(预取)相对于同步(随机)所占的物理 I/O 的百分比是多少?
  每个表空间的缓冲池命中率是多少?
  每分钟读取多少物理页面?
  对于每个事务要读取多少物理和逻辑页面?
  对于所有表空间,回答以下问题:
  哪个表空间的读取和写入的时间最慢?为什么?是因为其容器在慢速的磁盘上吗?容器大小是否相等?对比异步访问和同步访问,访问属性是否和期望的一致?随机读取的表应该有随机读取的表空间,这是为了得到高的同步读取百分比、通常较高的缓冲池命中率和更低的物理 I/O 率。
  对每个表空间,确保预取大小等于数据块大小乘以容器数。请发出以下命令:
  db2 "list tablespaces show detail"
  如果需要,可以为一个给定表空间改变预取大小。可以使用以下命令来检查容器定义:
  db2 "list tablespace containers for N show detail"
  在此,N 是表空间标识号。
  2. 缓冲池优化
  我时常发现一些 DB2 UDB 站点,虽然机器具有 2、4 或 8GB 内存,但是 DB2 数据库却只有一个缓冲池(IBMDEFAULTBP),其大小只有 16MB!
  如果在您的站点上也是这种情况,请为 SYSCATSPACE 目录表空间创建一个缓冲池、为TEMPSPACE表空间创建一个缓冲池以及另外创建至少两个缓冲池:BP_RAND和BP_SEQ。随机访问的表空间应该分配给用于随机访问的缓冲池(BP_RAND)。顺序访问(使用异步预取 I/O)的表空间应该分配给用于顺序访问的缓冲池(BP_SEQ)。根据某些事务的性能目标,您可以创建附加的缓冲池;例如,您可以使一个缓冲池足够大以存储整个“热”(或者说访问非常频繁的)表。当涉及到大的表时,某些 DB2 用户将重要表的索引放入一个索引(BP_IX)缓冲池取得了很大成功。
  太小的缓冲池会产生过多的、不必要的物理 I/O。太大的缓冲池使系统处在操作系统页面调度的风险中并消耗不必要的 CPU 周期来管理过度分配的内存。正好合适的缓冲池大小就在“太小”和“太大”之间的某个平衡点上。适当的大小存在于回报将要开始减少的点上。如果您没有使用工具来自动进行回报减少分析,那么您应该在不断增加缓冲池大小上科学地测试缓冲池性能(命中率、I/O 时间和物理 I/O 读取率),直到达到最佳的缓冲池大小。因为业务一直在变动和增长,所以应该定期重新评估“最佳大小”决策。
  1. SQL 成本分析
  一条糟糕的 SQL 语句会彻底破坏您的一整天。我不止一次地看到一个相对简单的 SQL 语句搞糟了一个调整得很好的数据库和机器。对于很多这些语句,天底下(或在文件中)没有 DB2 UDB 配置参数能够纠正因错误的 SQL 语句导致的高成本的情况。
  更糟糕的是,DBA 常常受到种种束缚:不能更改 SQL(可能是因为它是应用程序供应商提供的,例如 SAP、 PeopleSoft或 Siebel)。这给 DBA 只留下三条路可走:
  1. 更改或添加索引
  2. 更改群集
  3. 更改目录统计信息
  另外,如今健壮的应用程序由成千上万条不同的 SQL 语句组成。这些语句执行的频率随应用程序的功能和日常的业务需要的不同而不同。SQL 语句的实际成本是它执行一次的成本乘以它执行的次数。
  每个 DBA 所面临的重大的任务是,识别具有最高“实际成本”的语句的挑战,并且减少这些语句的成本。
  通过本机 DB2 Explain 实用程序、一些第三方供应商提供的工具或 DB2 UDB SQL Event Monitor 数据,您可以计算出执行一次 SQL 语句所用的资源成本。但是语句执行频率只能通过仔细和耗时地分析 DB2 UDB SQL Event Monitor 的数据来了解。
  在研究 SQL 语句问题时,DBA 使用的标准流程是:
  1. 创建一个 SQL Event Monitor,写入文件:
  $> db2 "create event monitor SQLCOST for statements write to ..."
  2. 激活事件监视器(确保有充足的可用磁盘空间):
  $> db2 "set event monitor SQLCOST state = 1"
  3. 让应用程序运行。
  4. 取消激活事件监视器:
  $> db2 "set event monitor SQLCOST state = 0"
  5. 使用 DB2 提供的 db2evmon 工具来格式化 SQL Event Monitor 原始数据(根据 SQL 吞吐率可能需要数百兆字节的可用磁盘空间):
  $> db2evmon -db DBNAME -evm SQLCOST
  > sqltrace.txt
  6. 浏览整个已格式化的文件,寻找显著大的成本数(一个耗时的过程):
  $> more sqltrace.txt
  7. 对已格式化的文件进行更完整的分析,该文件试图标识唯一的语句(独立于文字值)、每个唯一语句的频率(它出现的次数)和其总 CPU、排序以及其它资源成本的总计。如此彻底的分析在 30 分钟的应用程序 SQL 活动样本上可能要花一周或更多的时间。
分享到:
评论

相关推荐

    db2数据库性能优化小技巧

    ### DB2数据库性能优化小技巧详解 #### 一、Bufferpool优化 在DB2数据库中,Bufferpool(缓冲池)的设置对整个系统的性能有着重要的影响。合理的Bufferpool配置能够显著提升数据访问速度,减少I/O操作次数。下面将...

    db2数据库优化技巧,个人总结版

    ### DB2数据库优化技巧 #### 一、监视开关的重要性(第十条) 监视开关是了解数据库性能状况的关键。通过开启监视开关,我们可以收集到各种性能相关的数据,这对于诊断问题至关重要。命令`db2 "update monitor ...

    DB2数据库性能调整和优化

    本篇文章将深入探讨DB2数据库性能调整与优化的核心概念、方法以及实践技巧。 首先,理解数据库性能的基础是了解SQL查询执行的原理。在DB2中,查询优化器负责分析SQL语句并选择最佳执行计划。优化器的工作包括解析...

    数据库优化让数据库飞起来 十大DB2优化技巧

    ### 数据库优化让数据库飞起来:十大DB2优化技巧 #### 一、开启DB2监控开关,确保系统稳定运行 为了确保DB2数据库系统的稳定运行并及时获取必要的系统信息,可以开启DB2的监控开关。这包括但不限于锁、排序、缓冲...

    DB2数据库以及数据库对象指南

    无论是想要深入了解DB2数据库架构,还是希望掌握高效的数据管理技巧,这本书都是不可或缺的资源。通过学习本书,读者将能够更加熟练地操作DB2,解决实际工作中的复杂问题,提升个人在数据库领域的专业素养。

    DB2使用经验总结+DB2数据库性能优化的几个小技巧

    DB2是IBM开发的一款关系型数据库管理系统,广泛应用于企业级数据...提供的文档"DB2数据库性能优化的几个小技巧.docx"和"DB2使用经验总结.docx"可能会提供更具体的操作步骤和实战经验,建议详细阅读以获取更全面的知识。

    DB2数据库优化教程

    ### DB2数据库优化教程 #### 一、引言 随着信息技术的发展,数据库系统在现代企业的信息系统架构中扮演着至关重要的角色。特别是在企业级应用中,如ERP(企业资源规划)、OA(办公自动化)以及CRM(客户关系管理)...

    IBM DB2 数据库使用小技巧

    以下是对给定文件中提到的DB2数据库管理相关知识点的详细解释。 #### 1. 查看节点目录 `db2listnodedirectory` 该命令用于列出系统中所有已注册的节点。节点目录提供了关于网络中所有可用DB2实例的信息,包括节点...

    十大DB2优化技巧

    这些优化技巧涵盖了DB2的多个层面,从基础监控到高级调优,可以帮助DBA有效地提升DB2数据库的性能,减少延迟,提高系统的整体效率。在实际应用中,每个环境都有其独特性,因此在调整参数时需要根据具体情况灵活运用...

    DB2数据库性能优化技巧详解.docx

    DB2数据库性能优化是提升系统效率的关键环节,主要涉及三个方面:Bufferpool管理、SQL优化以及Lock管理。下面将详细介绍这三个方面的技巧。 首先,Bufferpool,即缓冲池,是数据库性能优化的核心之一。缓冲池是内存...

    DB2数据库参考资料大全

    DB2数据库参考资料大全包含了从基础到高级的全方位学习材料,旨在帮助用户从入门到精通DB2数据库系统。这个压缩包中的文件涵盖了多个关键主题,包括性能调整、管理指南、数据迁移、备份与恢复、服务器快速指南、连接...

    DB2数据库经验教训

    标题与描述概述的知识点主要集中在DB2数据库的深入理解和实践经验分享上,涵盖了DB2的专有名词、编程技巧、性能优化、系统管理以及与其他系统的交互等多个方面。以下是对这些知识点的详细解读: ### DB2专有名词...

    DB2数据库管理最佳实践pdf

    这份PDF文档很可能是对DB2数据库在实际操作中的优化策略、配置技巧和故障排查方法的深入探讨,旨在帮助管理员提升DB2的性能、稳定性和安全性。 在DB2数据库管理中,有几个关键的知识点是所有管理员都需要掌握的: ...

    .net连接DB2数据库编程简介

    在.NET环境中连接到DB2数据库是一项常见的任务,尤其对于开发跨平台的企业级应用程序而言。本文将详细介绍如何使用.NET Framework和IBM Data Provider for .NET来实现这一目标,以及相关的编程概念和示例。 首先,...

    DB2 数据库学习资料.zip

    4. **DB2数据库性能调整和优化.pdf**:此文档将深入讨论如何提升DB2的性能,包括索引优化、查询优化、内存调优、锁机制等。DBA在日常工作中,需要掌握这些技巧来确保数据库高效运行。 5. **精:RedHat_Enterprise_...

    在linux系统中安装DB2数据库

    在Linux系统中安装IBM DB2数据库是一个相对复杂的过程,但一旦成功,将为你的服务器提供一个强大、可靠的数据库管理系统。...记得,实践是最好的老师,多尝试,多学习,你将逐步掌握DB2数据库的管理和维护技巧。

    db2数据库性能优化

    ##### 优化技巧 - 使用适当的索引策略。 - 避免全表扫描。 - 最小化网络传输的数据量。 #### 总结 性能优化是一个持续的过程,需要不断监测和调整。通过理解并应用上述提到的关键技术和策略,可以在各种操作系统...

    DB2数据库调整数据库性能

    根据提供的标题、描述和部分内容,我们可以总结出关于“DB2数据库调整数据库性能”的一系列关键知识点。下面将详细探讨这些知识点: ...希望以上内容能够为您的DB2数据库性能优化工作提供一定的指导和帮助。

    DB2数据库全套资料(简体中文共5部分60M第3部分)

    "DB2数据库全套资料(简体中文共5部分60M第3部分)"是一份全面介绍DB2数据库管理与开发的资源集合,尤其适合DB2数据库管理员作为学习和工作的参考资料。 在这一部分中,包含以下几个关键知识点: 1. **故障诊断和...

    DB2数据库基础与应用开发

    - 教授有效管理DB2数据库服务器所需的技巧。 - 包括表空间管理、索引管理、备份恢复等主题。 - **第6部分:数据并发性** - 讲解数据一致性的重要性及其在单用户和多用户环境中的维护机制。 - 探讨事务处理和锁...

Global site tag (gtag.js) - Google Analytics