- 浏览: 555601 次
- 性别:
- 来自: 杭州
文章分类
- 全部博客 (340)
- Spring (4)
- Hibernate (2)
- Linux (34)
- Oracle (145)
- Eclipse (1)
- UML (1)
- HTML&&JAVASCRIPT (11)
- JAVA (33)
- 设计模式 (1)
- 版本控制 (1)
- wrap框架 (3)
- IBATIS (5)
- Ruby (1)
- DWR (1)
- MINA (11)
- JBPM (2)
- 缓存技术 (4)
- 网络 (3)
- 应用服务器 (1)
- GWT (5)
- 杂谈 (2)
- ICE (4)
- XML (2)
- ArcGis (2)
- Flex (8)
- junit单元测试 (1)
- SNMP (1)
- 存储 (1)
- office (1)
- MongoDB (0)
- Greenplum (3)
- 管理点滴 (1)
- C++ (6)
- 网络入门 (3)
- Tomcat (7)
- JMX (0)
- webservice (1)
- Oracle的10046事件 (1)
- Library cache内部机制详解 (1)
- expdp通过dblink来导入 (1)
最新评论
-
yuanliangding:
有没有关于mock的更多知识。
基于mock对象和JUnit框架简化Spring Web组件单元测试 -
saup007:
ssh端口不是22,怎么搞呢?
Greenplum 学习笔记 -
springmvc-freemarker:
java开源项目源码实例下载
Apache上全部JAVA开源项目简介 -
bobbell:
哇塞,你真厉害,整理的非常全面。我是一个java barcod ...
Greenplum 学习笔记 -
wsj55133245513324:
这不是bug,你将日志级别从debug提升到INFO 就好了 ...
Spring,smppapi,apache mina, ssl快速实现安全的smpp(5)
随着数据库技术的发展 ,其应用越来越广泛,已逐渐成为现代计算机信息系统和计算机应用系统的基础和核心。基于数据库的联机事务处理(OLTP)以及联机分析处理(OLAP)银行、企业、 政府等部门最为重要的计算机应用之一,并作为电子政务、门户网站等应用系统底层数据管理的工具。 数据库最基本的任务是存储、管理数据,而终端用户唯一能看到的数据库特性就是其性能:数据库以何速度处理某一指定查询的结果,并且将结果返回到用户所用的工具和应用程序。从大多数系统的应用实例来看,查询操作在各种数据库操作中所占据的比重最大、查阅新闻、 查看文件、 查询统计信息等。因此,数据库查询操作的效率是影响一个应用系统响应时间的关键因素。随着一个应用系统中数据的动态增长,数据量变大,数据库查询效率就会有所降低,应用系统的响应速度也随之减慢,尤其对于海量数据的管理和查询问题就更加突出,如何提高动态增长的数据库的查询效率就显得尤为重要。 目前通用的数据库产品有很多种,其中ORACLE数据库以其支持大数据库、多用户的高性能事务处理, 对业界各项工业标准的支持,完整的安全和完整性控制,支持分布式数据库利分布处理 具有可移植性、可兼容性和可连接性等突出优点倍受用户喜爱,应用较为广泛,在互联网数据库平台上处于领先地位、其Spatial技术能更加有效地管理地理信息,实现海量空间信息的存储和管理。本文结合ORACLE数据库应用经验,从命中率提高、多表查询优化、大表查询优化和SQL优化等四个方面阐述ORACLE数据库查询效率提高的经验和方法。 “命中率(HITRATIO) 是指直接从内存中取得数据而不从磁盘中取得数据的比率,也就是查询请求的数据块已经在内存中次数的百分比”。影响命中率的因素有四种:字典表活动、临时段活动、回滚段活动、表扫描, 应用DBA可以对这四种因素进行分析,找出数据库命中率低的症结所在。 1.1 字典表活动 当一个SQL 语句第一次到达ORACLE内核时数据库对SQL语句进行分析,包含在查询中的数据字典对象被分解,产生SQL执行路径。如果SQL语句指向一个不在SGA中的对象??表或视图,ORACLE执行SQL语句到数据典中查询有关对象的信息。数据块从数据字典表被读取到SGA的数据缓存中。由于每个数据字典都很小,因此,我们可缓存这些表以提高对这些表的命中率。但是由于数据字典表的数据块在SGA中占据空间,当增加全部的命中率时,它们会降低表数据块的可用空间, 所以若查询所需的时间字典信息已经在SGA缓存中,那么就没有必要递归调用。 1.2临时段的活动 当用户执行一个需要排序的查询时,ORACLE设法对内存中排序区内的所有行进行排序,排序区的大小由数据库的init.ora文件的数确定。如果排序区域不够大,数据库就会在排序操作期间开辟临时段。临时段会人为地降低 OLTP(online transaction processing)应用命中率,也会降低查询进行排序的性能。如果能在内存中完成全部排序操作,就可以消除向临时段写数据的开销。所以应将SORT_AREA_SIZE设置得足够大,以避免对临时段的需要。这个参数的具体调整方法是: 查询相关数据,以确定这个参数的调整。 select * from v$sysstat where name='sorts(disk)'or name='sorts(memory); 例如在某数据库上进行这个查询操作, 结果将为 STATISTIC# NAME CLASS VALUE 174 sorts(disk) 64 2280 173 sorts(memory) 64 15600804 可见,大部分排序是在内存中进行的,但还有小部分发生在临时段, 需要调整 值,查看init.ora文件的SORT_AREA_SIZE值,参数为:SORT_AREA_SIZE=65536将其调整到SORT_AREA_SIZE=131072、这个值调整后,重启ORACLE数据库即可生效。 1.3 回滚段的活动 回滚段活动分为回滚活动和回滚段头活动。对回滚段头块的访问会降低应用的命中率, 对OLTP系统命中率的影响最大。为确认是否因为回滚段影响了命中率,可以查看监控输出报表中的“数据块相容性读一重写记录应用” 的统计值,这些统计值是用来确定用户从回滚段中访问数据的发生次数。 1.4 表扫描 通过大扫描读得的块在数据块缓存中不会保持很长时间, 因此表扫描会降低命中率。为了避免不必要的全表扫描,首先是根据需要建立索引,合理的索引设计要建立人对各种查询的分析和预测上,笔者会在SQL优化中详细谈及;其次是将经常用到的表放在内存中,以降低磁盘读写次数。例如 Alter table your_table_name cathe。 在进行多表联合查询时,数据库可能会采取MERGEJOINS、NESTED LOOP、HASH JOIN。其中,不论什么时候哈希联结要比另两种联结开销要小。我们可以使用哈希联结代替MERGEJOINS、NESTED LOOP联结、因此,在应用中,可添加一些设置使得数据库在有多大联合查询发生时使用哈希联结。其方法是: 以 oracle用户身份登录数据库服务器,在initosid.ora文件中添加 : HASH_JOIN_ENABLED=TRUE HASJ_AREA_SIZE=26000 修改完后,重新启动数据库,使这些参数值生效。 数据库中有些表是增长非常快的,记录量很大,对这种表进行访问时,索引的好处就微乎其微了,通常采用两种办法来进行大表访问的优化。 3.1大表建立在哈希簇中 create cluster TRADE_CLUSTER(vuserid integer) storage(initial 50M next 50M) hash is vuserid size 60 hashkeys 10000000;/*hashkeys指定了在哈希表里的所期望的行数。*/ create table trade_detail_new as select * from trade_detail cluster TRADE_CLUSTER(userid); drop table trade_detail; rename trade_detail_new to trade_detail; 3.2 建分区表 将一个大表分开放置在几个逻辑分区中或者是将一个大表分成了几张小表 ,即可以单独对这些小表进行查询,也可以union all一 起查询。 例如:将 一个记录交易详情的表拆分: create trade_detail_1 as select * from trade_detail where trade_time between to_date('mm-dd','01-01')and to_date('mm-dd','03-31'); alter table trade_detail_1 add constraint check_trade_detail_1 check (trade_time between to_date('mm-dd','01-01')and to_date('mm-dd','03-31')); 同样,建立起另几张按交易发生的季度而划分的表。然后创建执行四个表联合的视图; create view trade_detail as select * from trade_detail_1 union all select * from trade_detail_2 union all select * from trade_detail_3 union all select * from trade_detail_4; 这样在查询某段时间内的数据时只访问小表就可以了,需要时也可进行联合查询。 应用程序的执行最终将归结为数据库中的SQL 语句执行,SQL语句消耗了70%-90%的数据库资源。因此SQL 语句的执行效率最终决定了ORACLE数据库的性能。许多程序员认为查询优化是DBMS(数据库管理系统)的任务,与程序员所编写的SQL语句关系不大,这是错误的。一个好的查询计划往往可以使程序性能提高数十倍。另外,SQL语句独立于程序设计逻辑,相对于对程序源代码的优化,对SQL语句的优化在时间成本和风险上的代价都很低。SQL优化的主要途径是: (l)有效索引的建立。在经常进行连接,但是没有指定为外键的列上建立索引;在频繁进行排序或分组 (即进行group by 或 order by 操作)的列上建立索引;在条件表达式中经常用到的不同值较多的列上建立检索,在不同值少的列上不要建立索引;如果待排序的列有多个,可以在这些列上建立复合索引(compound index)。 为了降低I/O竟争, 索引要建在与用户表空间不在同一磁盘上的索引空间里。索引分为:分区索引、完全索引、唯一索引、位图索引等几种类型,在建立索引前,应该测量这个索引的选择性,索引的选择性是指索引列里不同值的数目与表中记录数的比。 测绘索引的选择性的语句为: select count(distinct userid||'%'||username||'%'||password)from userinfo; COUNT(DISTINCT USERDI'%'||USERNAME||'%'||PASSWORD) ---------------------------------------- 10400 select count(*)from userinfo; COUNT ------- 10400 可见这个索引选择性很好,已经达到了1.0 (2)在有大量重复值并且经常有范围查询(例如 between,>,<>=,<=)的列,或是用到order by、group by的列,可考虑建立群集索引; (3)要经常同时存取多列,目每列都含有重复值可考虑建立组合索引 (4)优化表达式,在能使用范围查询时尽可能使用范围索引, 而少用“like“,因为”LIKE“关键字支持的通配符匹配特别耗费时间。 (5)使用ORACLE语句优化器(oracle optimizer)和行锁管理器( row-level manager)来调整优化SQL语句。 数据库的优化是个细致的工作,提高查询效率只是其中的一个部分。亦如何提高查询效率这个问题上,本文作者通过对ORACLE数据库应用的实践经验 ,总结了四个方面来优化查询:监测命中率,当其降低时,进行调整;多表联合查询时,使用哈希联接;将大表进行优化,以缩短查询时间;对SQL语句进行优化,以提高查询效率。通过这些方法 可更好地发挥ORACLE数据库的作用。1.ORACLE数据查询命中率的提高
2多表查询的优化
3大表查询的优化
4 SQL优化
5结 论
发表评论
-
expdp通过dblink来导入
2011-12-14 15:01 1779create.sql: spo create.log rem ... -
Library cache内部机制详解
2011-12-14 14:55 885Library cache内部机制详解 http://www ... -
Oracle的10046事件
2011-12-14 14:53 2092Oracle的10046事件,可以跟踪应用程序所执行的SQL语 ... -
REDO LOG MEMBER STATUS 和 REDO LOG GROUP STATUS
2011-12-14 14:51 924V$LOG 中列出的是REDO LOG GROUP STA ... -
oracle的exp/imp使用方法学习(转)
2011-08-30 08:54 954exp/imp两个命令可以说是oracle中最常用的命令了 ... -
oracle几个awr报告
2011-08-09 14:25 890工作中,碰到的数据库慢的几个awr报告 -
Oracle Profile 使用详解
2011-06-21 14:41 966一、目的: Oracle系统中的profile可以用来对 ... -
ORA-27013
2011-04-13 14:25 1510很新的一个bug,看下你的 memory_target是不是& ... -
ACLE表连接方式分析及常见用法
2011-03-23 09:14 1109摘要: 针对在数据仓库 ... -
ORACLE 外部表应用
2011-03-09 14:58 1062SQL> create or replace direc ... -
How to convert a 32-bit database to 64-bit database on Linux
2011-02-18 14:09 1209How to convert a 32-bit databas ... -
expdp impdp 数据库导入导出命令详解
2011-02-16 09:10 1948一、创建逻辑目录,该命令不会在操作系统创建真正的目录,最 ... -
Oracle手工解/锁表
2011-01-25 14:15 2487手工锁表:lock table tbl_t1 in row ... -
oracle动态性能视图
2011-01-22 10:47 855Oracle动态性能视图个人整理 -
RBO规则介绍
2011-01-17 16:45 1057•无条件使用索引•使用内置的优先级别决定访问路径•比较难以 ... -
关于排序、sort_area_size、临时表空间
2011-01-13 15:30 1114简单陈述一下:针对每 ... -
创建索引ORACLE 需要做的工作
2011-01-13 14:53 1315一. 先来看一下创建索引要做哪些操作:1. 把inde ... -
表之间的连接
2011-01-13 10:42 791Join是一种试图将两个表结合在一起的谓词,一次只能连接2 ... -
重建索引的条件
2011-01-12 16:43 947如果索引存在碎片,那每个索引数据块上的索引数据就更少,会导致我 ... -
TKPROF使用学习
2011-01-10 17:38 715Tkprof工具可用来格式化sql trace产生的文件, ...
相关推荐
《基于ORACLE数据库查询优化方法研究》这篇论文深入探讨了如何提升ORACLE数据库查询效率,以应对日益增长的数据量和复杂的应用需求。论文主要从四个方面展开: 首先,论文提到提高查询命中率是优化的关键。命中率指...
【Oracle数据库查询优化方法研究】 Oracle数据库是当前广泛应用的关系型数据库之一,因其强大的数据存储能力和多用户高并发的优秀性能而备受大型企业青睐。优化Oracle数据库的查询效率对于提升整体系统性能至关重要...
Oracle数据库作为企业级信息管理系统的重要支撑平台,其查询优化方法尤为关键。本文重点分析Oracle数据库索引及临时表在查询中的应用,并探讨了基于索引使用SQL语句进行数据库效率优化的几种实现方法。 在Oracle...
本文主要探讨了在Oracle数据库中进行查询优化的策略,以提高数据处理速度和查询效率。 首先,Oracle数据库的优化器是关键组件,它负责确定SQL语句的最佳执行路径。优化器有两种类型:基于规则的优化器(RBO)和基于...
基于Oracle数据库性能优化技术研究.pdf
本文主要探讨了Oracle数据库性能优化的方法和工具,特别强调了智能优化器在提升性能中的作用。 首先,性能调整的目标是解决系统吞吐量下降和用户响应时间变慢的问题。优化的基本原则是减少磁盘访问以获取所需数据。...
3. ORACLE数据库中SQL查询优化 在ORACLE数据库中,SQL优化的处理过程涉及三个主要阶段:解析数据、执行数据和提取数据。解析阶段涉及对SQL语句的语法和数据进行整体解析,以及将相关数据放入共享应用中。在执行阶段...
Oracle数据库性能优化是确保系统高效运行的关键环节,尤其是在大数据量和高并发的环境中。Oracle数据库因其先进、完整和集成的特性,在市场中占据主导地位,因此深入理解和掌握Oracle的优化技术至关重要。 首先,...
Oracle数据库的优化设计是提升其运行效率和性能的关键所在,特别是在面对日益增长的数据处理需求时,优化显得尤为重要。本文主要探讨了如何针对Oracle数据库进行有效的优化设计,以提高其服务质量和用户满意度。 ...
基于Oracle数据库索引的查询优化研究[J]. 新余学院学报, 2016, 21(4): 0099-03. 本文的研究成果对于理解Oracle数据库索引的重要性以及如何有效地利用索引进行查询优化提供了理论依据和实践指导,为相关领域的技术...
"基于Oracle数据库海量数据的查询优化研究" 本文主要探讨了 Oracle 数据库海量数据的查询优化研究,通过对 Oracle 数据库的分析,讨论了分页查询技术、SQL 语句优化、索引技术等查询优化方法,并对 Oracle 数据库的...
本文主要探讨了Oracle数据库性能的评价指标,分析了影响性能的主要因素,并提出了优化和监控的方法。 首先,Oracle数据库性能的评价指标包括以下几个方面: 1. **数据库吞吐量**:衡量数据库在单位时间内处理SQL...
基于Oracle数据库体系结构的理解,性能优化主要聚焦于系统、数据库与网络三个层面。 ##### 4.1 数据库参数调整 **4.1.1 CPU参数调整**:监控CPU使用率,确保在高负荷下CPU使用率达到90%以上,但避免空闲时段过度...
Oracle数据库内置了一个基于成本的优化器,用于确定执行查询的最佳策略。优化器的工作原理如下: 1. **评估不同执行路径的成本**:优化器会分析SQL语句,并评估不同执行路径(如表扫描与索引扫描)的成本。 2. **...
本文总结了基于Oracle数据库的索引优化方法,包括索引的概念、分类、设计和优化原则等。索引的概念是指为加速对表数据的访问而创建的数据段。索引类似于书的目录,包含表的列值和相应的ROW ID。ROW ID是 Oracle ...
本文旨在探讨基于Oracle数据库SQL查询语句的优化规则,并通过实际案例分析执行计划,从而提出有效的优化规则。 在引言部分,文章首先指出了数据库技术及应用系统的发展和完善,伴随着数据量和数据结构复杂性的增加...
二、Oracle数据库性能优化方法 1. SQL语句优化 优化SQL语句的效率是提高Oracle数据库性能的关键步骤。在数据库设计时,需要注意避免使用低效的查询语句,比如不建议使用“select *”,因为这种全列选择方式可能会...
### 基于Oracle数据库的SQL语句优化 #### 引言 Oracle数据库是由甲骨文公司开发的一款关系型数据库管理系统,在当前的数据库市场中占据着重要的地位。它广泛应用于商业、政府等领域,具备强大的数据处理能力和高效...
基于Oracle数据库的多分辨率海量遥感影像数据的存储管理与调用方法研究 摘要: 本文研究了基于Oracle数据库的多分辨率海量遥感影像数据的存储管理与调用方法。由于遥感和Web技术的高速发展,瓦片遥感影像地图系统的...
《基于Solaris的Oracle RAC数据库缓存优化方法研究》探讨了在Solaris操作系统环境下,如何优化Oracle Real Application Clusters (Oracle RAC)数据库的缓存以提升性能。Oracle RAC是一种集群数据库技术,它允许多个...