- 浏览: 215609 次
- 性别:
- 来自: 北京
文章分类
最新评论
-
bluky999:
jiakechong 写道跟啊里爸爸那个差不多吧跟 dubb ...
淘宝-HSF -
jiakechong:
跟啊里爸爸那个差不多吧
淘宝-HSF -
lookqlp:
您好!我写了个关键词关联度统计的mapreduce,排序非常慢 ...
排序--MapReduce -
liubang201010:
DB Audit更多参考资料:
http://www.inno ...
8--《DB Audit》 -
裴小星:
这些数据库专家,同样不了解程序员。SQL(或PL/SQL,TS ...
MapReduce:一个重大的倒退
http://www.iteye.com/topic/805815
1. SELECT子句中避免使用 “*”
当你想在SELECT子句中列出所有的COLUMN时,使用动态SQL列引用 ‘*’
是一个方便的方法.不幸的是,这是一个非常低效的方法. 实际上,ORACLE在解析的过程中, 会将“*” 依次转换成所有的列名,
这个工作是通过查询数据字典完成的, 这意味着将耗费更多的时间.
2.使用DECODE函数来减少处理时间
使用DECODE函数可以避免重复扫描相同记录或重复连接相同的表. 例如:
- SELECT COUNT (*), SUM (SAL) FROM EMP WHERE DEPT_NO = 0020 AND ENAME LIKE ‘SMITH%’;
- SELECT COUNT (*), SUM (SAL) FROM EMP WHERE DEPT_NO = 0030 AND ENAME LIKE ‘SMITH%’;
SELECT COUNT(*),SUM(SAL) FROM EMP WHERE DEPT_NO = 0020 AND ENAME LIKE ‘SMITH%’; SELECT COUNT(*),SUM(SAL) FROM EMP WHERE DEPT_NO = 0030 AND ENAME LIKE ‘SMITH%’;
你可以用DECODE函数高效地得到相同结果:
- SELECT COUNT (DECODE(DEPT_NO,0020,’X’, NULL )) D0020_COUNT,
- COUNT (DECODE(DEPT_NO,0030,’X’, NULL )) D0030_COUNT,
- SUM (DECODE(DEPT_NO,0020,SAL, NULL )) D0020_SAL,
- SUM (DECODE(DEPT_NO,0030,SAL, NULL )) D0030_SAL
- FROM EMP WHERE ENAME LIKE ‘SMITH%’;
SELECT COUNT(DECODE(DEPT_NO,0020,’X’,NULL)) D0020_COUNT, COUNT(DECODE(DEPT_NO,0030,’X’,NULL)) D0030_COUNT, SUM(DECODE(DEPT_NO,0020,SAL,NULL)) D0020_SAL, SUM(DECODE(DEPT_NO,0030,SAL,NULL)) D0030_SAL FROM EMP WHERE ENAME LIKE ‘SMITH%’;
类似的,DECODE函数也可以运用于GROUP BY 和ORDER BY子句中.
3.删除重复记录
最高效的删除重复记录方法 ( 因为使用了ROWID)
- DELETE FROM EMP E WHERE E.ROWID > ( SELECT MIN (X.ROWID) FROM EMP X WHERE X.EMP_NO = E.EMP_NO);
DELETE FROM EMP E WHERE E.ROWID > (SELECT MIN(X.ROWID) FROM EMP X WHERE X.EMP_NO = E.EMP_NO);
4. 用TRUNCATE替代DELETE
当删除表中的记录时,在通常情况下,回滚段(rollback segments )
用来存放可以被恢复的信息,如果你没有COMMIT事务,ORACLE会将数据恢复到删除之前的状态(准确地说是恢复到执行删除命令之前的状况),而当运
用TRUNCATE时, 回滚段不再存放任何可被恢复的信息.当命令运行后,数据不能被恢复.因此很少的资源被调用,执行时间也会很短.
5.计算记录条数
和一般的观点相反, count(*) 比count(1)稍快 ,当然如果可以通过索引检索,对索引列的计数仍旧是最快的. 例如 COUNT(EMPNO)
6.用Where子句替换HAVING子句
避免使用HAVING子句,HAVING 只会在检索出所有记录之后才对结果集进行过滤,这个处理需要排序、总计等操作,如果能通过WHERE子句限制记录的数目,那就能减少这方面的开销, 例如:
- --低效
- SELECT REGION, AVG (LOG_SIZE) FROM LOCATION GROUP BY REGION HAVING REGION != ‘SYDNEY’ AND REGION != ‘PERTH’
- --高效
- SELECT REGION, AVG (LOG_SIZE) FROM LOCATION WHERE REGION != ‘SYDNEY’ AND REGION != ‘PERTH’ GROUP BY REGION
--低效 SELECT REGION,AVG(LOG_SIZE) FROM LOCATION GROUP BY REGION HAVING REGION != ‘SYDNEY’ AND REGION != ‘PERTH’ --高效 SELECT REGION,AVG(LOG_SIZE) FROM LOCATION WHERE REGION != ‘SYDNEY’ AND REGION != ‘PERTH’ GROUP BY REGION
7. 用EXISTS替代IN
在许多基于基础表的查询中,为了满足一个条件,往往需要对另一个表进行联接.在这种情况下, 使用EXISTS(或NOT EXISTS)通常将提高查询的效率.
- --低效
- SELECT * FROM EMP WHERE EMPNO > 0 AND DEPTNO IN ( SELECT DEPTNO FROM DEPT WHERE LOC = ‘MELB’)
- --高效:
- SELECT * FROM EMP WHERE EMPNO > 0 AND EXISTS ( SELECT ‘X’ FROM DEPT WHERE DEPT.DEPTNO = EMP.DEPTNO AND LOC = ‘MELB’)
--低效 SELECT * FROM EMP WHERE EMPNO > 0 AND DEPTNO IN (SELECT DEPTNO FROM DEPT WHERE LOC = ‘MELB’) --高效: SELECT * FROM EMP WHERE EMPNO > 0 AND EXISTS (SELECT ‘X’ FROM DEPT WHERE DEPT.DEPTNO = EMP.DEPTNO AND LOC = ‘MELB’)
8.用NOT EXISTS替代NOT IN
在子查询中,NOT IN子句将执行一个内部的排序和合并. 无论在哪种情况下,NOT IN都是最低效的
(因为它对子查询中的表执行了一个全表遍历). 为了避免使用NOT IN,我们可以把它改写成外连接(Outer Joins)或NOT
EXISTS. 例如:
SELECT …FROM EMP WHERE DEPT_NO NOT IN (SELECT DEPT_NO FROM DEPT WHERE DEPT_CAT=’A’);
- --为了提高效率改写为: (方法一: 高效)
- SELECT …. FROM EMP A,DEPT B WHERE A.DEPT_NO = B.DEPT(+) AND B.DEPT_NO IS NULL AND B.DEPT_CAT(+) = ‘A’
- -- (方法二: 最高效)
- SELECT …. FROM EMP E WHERE NOT EXISTS ( SELECT ‘X’ FROM DEPT D WHERE D.DEPT_NO = E.DEPT_NO AND DEPT_CAT = ‘A’);
--为了提高效率改写为: (方法一: 高效) SELECT ….FROM EMP A,DEPT B WHERE A.DEPT_NO = B.DEPT(+) AND B.DEPT_NO IS NULL AND B.DEPT_CAT(+) = ‘A’ -- (方法二: 最高效) SELECT ….FROM EMP E WHERE NOT EXISTS (SELECT ‘X’ FROM DEPT D WHERE D.DEPT_NO = E.DEPT_NO AND DEPT_CAT = ‘A’);
9.用EXISTS替换DISTINCT
当提交一个包含一对多表信息(比如部门表和雇员表)的查询时,避免在SELECT子句中使用DISTINCT. 一般可以考虑用EXIST替换
例如:
- --低效:
- SELECT DISTINCT DEPT_NO,DEPT_NAME FROM DEPT D,EMP E WHERE D.DEPT_NO = E.DEPT_NO
- --高效:
- SELECT DEPT_NO,DEPT_NAME FROM DEPT D WHERE EXISTS ( SELECT ‘X’ FROM EMP E WHERE E.DEPT_NO = D.DEPT_NO);
- --EXISTS 使查询更为迅速,因为RDBMS核心模块将在子查询的条件一旦满足后,立刻返回结果.
--低效: SELECT DISTINCT DEPT_NO,DEPT_NAME FROM DEPT D,EMP E WHERE D.DEPT_NO = E.DEPT_NO --高效: SELECT DEPT_NO,DEPT_NAME FROM DEPT D WHERE EXISTS ( SELECT ‘X’ FROM EMP E WHERE E.DEPT_NO = D.DEPT_NO); --EXISTS 使查询更为迅速,因为RDBMS核心模块将在子查询的条件一旦满足后,立刻返回结果.
10. 用索引提高效率
索引是表的一个概念部分,用来提高检索数据的效率,实际上ORACLE使用了一个复杂的自平衡B-tree结构,通常通过索引查询数据比全表扫描要快,当
ORACLE找出执行查询和Update语句的最佳路径时, ORACLE优化器将使用索引,
同样在联结多个表时使用索引也可以提高效率,另一个使用索引的好处是,它提供了主键(primary
key)的唯一性验证,除了那些LONG或LONG RAW数据类型, 你可以索引几乎所有的列. 通常, 在大型表中使用索引特别有效.
当然,你也会发现, 在扫描小表时,使用索引同样能提高效率,虽然使用索引能得到查询效率的提高,但是我们也必须注意到它的代价.
索引需要空间来存储,也需要定期维护,每当有记录在表中增减或索引列被修改时,索引本身也会被修改,这意味着每条记录的INSERT , DELETE
, UPDATE将为此多付出4 , 5 次的磁盘I/O, 因为索引需要额外的存储空间和处理,那些不必要的索引反而会使查询反应时间变慢
注:定期的重构索引是有必要的.
11. 避免在索引列上使用计算
WHERE子句中,如果索引列是函数的一部分,优化器将不使用索引而使用全表扫描. 举例:
- --低效:
- SELECT … FROM DEPT WHERE SAL * 12 > 25000;
- --高效:
- SELECT … FROM DEPT WHERE SAL > 25000/12;
--低效: SELECT …FROM DEPT WHERE SAL * 12 > 25000; --高效: SELECT … FROM DEPT WHERE SAL > 25000/12;
12. 用>=替代>
- --如果DEPTNO上有一个索引
- --高效:
- SELECT * FROM EMP WHERE DEPTNO >=4
- --低效:
- SELECT * FROM EMP WHERE DEPTNO >3
--如果DEPTNO上有一个索引 --高效: SELECT * FROM EMP WHERE DEPTNO >=4 --低效: SELECT * FROM EMP WHERE DEPTNO >3
两者的区别在于, 前者DBMS将直接跳到第一个DEPT等于4的记录而后者将首先定位到DEPTNO=3的记录并且向前扫描到第一个DEPT大于3的记录.
发表评论
-
OCP认证考试指南全册10g
2012-01-06 18:49 1024常用命令: 1,lsnrctl status;emctl s ... -
exits 和in 深度分析(转载,出处不明)
2011-08-22 21:03 897EXISTS的执行流程 select * from t1 wh ... -
索引有点靠后
2011-08-10 21:51 738记得在taobao时候需要统计一个数据,但是通过不了SQLWE ... -
《MySQL 性能调优与架构设计》
2011-08-10 21:47 805MySQL的基本架构:SQL Layer和Storage En ... -
《Oracle Database 10g 性能调整与优化》
2011-08-02 21:31 10488.2 当从表中访问数据 ... -
Oracle零数据丢失
2011-07-25 20:28 934Oracle在版本7的时候, ... -
硬盘存储和磁盘存储比较
2011-05-30 14:02 760如图 -
解析oracle的ROWNUM -- 作者: chen_liang
2011-05-17 11:32 828对于rownum来说它是oracle系统顺序分配为从查询 ... -
flashback 需要的条件
2011-04-13 19:00 789flashback table 需要下面几个条件 1. ... -
oracle表列名大小写
2011-03-23 22:06 4024不是我写的sql,比较烂,但是有一个可以关注的点 oracle ... -
MapReduce:一个重大的倒退
2011-03-22 23:09 1645转载http://www.cnblogs.com/c ... -
ORA-12154
2011-03-20 23:16 913看看监听: lsnrctl status 是不是正常 ... -
Oracle -other
2011-03-12 13:10 820JackJw 的杂货铺 http://jackjw.itpu ... -
数据库的最佳布局
2011-03-09 23:26 8091,并发访问对象的分离 2,数据和相应的索引的分开 3,回 ... -
执行计划详解
2011-03-09 22:00 1133一、什么是执行计划 An explain plan is ... -
优化器
2011-03-07 23:47 766访问路径:FULL TABLE SCAN 全表扫描;Index ... -
B树索引和位图索引的使用环境
2011-03-07 00:18 855B树索引:是联机事务处理应用的最好选择,键值列是最适合的 位 ... -
sqlplus autotrace
2011-03-05 14:14 759出自eygle http://www.eygle.com/fa ... -
Oracle 重要文件系统解释 转载
2011-02-25 23:01 831Oracle 中要了解的文件实在太多了,一不小心就被弄 ... -
聚族索引、非聚族索引、组合索引的含义和用途 转载
2011-02-25 21:50 1261http://blog.csdn.net/zhaohuabin ...
相关推荐
“SCF_Season4 6.0.0.1 New Skill code and shop1.txt0.txt”可能包含的是第四个赛季6.0.0.1版本的新技能代码和商店更新,这对于游戏平衡性和新内容的引入非常重要。技能代码涉及到角色的技能学习、升级和使用,而...
Depending on your role and skill level, this book will serve as a companion to the other Wrox books in the Microsoft SQL Server Beginning and Professional series.. This book will help you to learn: ...
Learning how to solve these problems will give you the skill and confidence to step up in your career. With SQL Practice Problems, you can get that level of experience by solving sets of targeted ...
usually have the database administrator (DBA) skill set in-house to fix these performance problems. Often the application vendor will not even have the right know-how or database expertise required ...
### Oracle数据库中的复杂SQL语句解析 在Oracle数据库中,复杂的SQL语句是处理大量数据、执行高级查询和实现各种业务需求的关键技术之一。本文将根据提供的内容介绍几个典型的复杂SQL应用场景及其具体实现方法。 #...
"skill-map-master.zip" 文件正是这样一个资源,它包含了各种IT领域的技能体系,如前端开发、后端开发、大数据处理、运维以及测试等。 首先,前端开发是构建Web应用的用户界面部分,涉及HTML、CSS、JavaScript等...
CREATE VIEW Employee_Skill_Stat AS SELECT SkillCategory, COUNT(EmployeeID) AS TotalEmployee FROM EmployeeSkill GROUP BY SkillCategory; ``` 这个视图会返回每个职业技能类别下的员工数量。 在开发平台如...
SQL Server Integration Services (SSIS). This is because the other tools would be nothing without the cleansing and movement of data into a presentable format. The product can extract, transform, and ...
6. **Database操作相关函数**:这部分涵盖了用于操作数据库的一系列函数,如SQL查询、事务管理、索引创建和优化等。通过这些函数,开发者可以直接在Allegro Skill中进行复杂的数据库操作,而不必依赖外部数据库API。...
Oracle中RAISE异常详解: 由三种方式抛出异常 1. 通过PL/SQL运行时引擎 2. 使用RAISE语句 3. 调用RAISE_APPLICATION_ERROR存储过程
"T-SQL 查询进阶 高级查询" 本篇文章主要介绍了数据库范式在数据库设计中的重要性,并通过一个简单的数据库 DEMO 将一个不符合范式的数据库一步步从第一范式实现到第四范式。 数据库范式是为了消除重复数据减少...
Oracle SQL 是一种强大的数据库查询语言,用于从关系型数据库中检索、更新和管理数据。本实例主要探讨了如何使用复杂的查询语句,包括子查询和外连接,来处理多表查询。 1. 子查询(Subquery) 子查询是嵌套在其他...
SSD7 Skill Builder是针对数据库管理领域的一项训练,特别是聚焦于Solid State Drives(SSDs)的优化和管理。...这不仅涉及理论知识,还包括实践技能,比如使用SQL语句创建和修改表结构,以及进行性能调优。
4. **数据管理**:可能包括数据库设计,SQL查询优化,以及数据备份和恢复策略的学习。 5. **故障诊断与解决**:学员可能需要学习如何通过日志分析、调试工具找出系统错误,并提供解决方案。 6. **项目管理**:了解...
在学习过程中,你需要理解如何在SQL语句中定义这些约束,例如在创建表时使用`PRIMARY KEY`和`FOREIGN KEY`关键字。此外,还需要了解如何使用`ALTER TABLE`语句添加或修改已存在的约束,以及如何处理违反完整性约束的...
在源码中,我们可能还会发现数据库设计的部分,如SQL查询语句或NoSQL操作,用于持久化存储用户和技能数据。数据库的设计和优化是保证系统高效运行的关键。 此外,源码可能还包括错误处理和日志记录,这对于调试和...
- **通用技能集(Common skill sets)**:Oracle9i允许使用相同的技能进行各种操作,提高了工作效率。 - **统一管理接口(One management interface)**:通过一个管理界面可以控制整个Oracle环境,方便了系统管理...