`

HASH JOIN ,MERGE JOIN ,NESTED LOOP详解

阅读更多
1,排序 - - 合并连接(Sort Merge Join, SMJ)

  内部连接过程:

  1) 首先生成row source1需要的数据,然后对这些数据按照连接操作关联列(如A.col3)进行排序。

  2) 随后生成row source2需要的数据,然后对这些数据按照与sort source1对应的连接操作关联列(如B.col4)进行排序。

  3) 最后两边已排序的行被放在一起执行合并操作,即将2个row source按照连接条件连接起来

  下面是连接步骤的图形表示:

       MERGE

      /       \

  SORT        SORT

    |            |

  Row Source 1  Row Source 2


  如果row source已经在连接关联列上被排序,则该连接操作就不需要再进行sort操作,这样可以大大提高这种连接操作的连接速度,因为排序是个极其费资源的操 作,特别是对于较大的表。预先排序的row source包括已经被索引的列(如a.col3或b.col4上有索引)或row source已经在前面的步骤中被排序了。尽管合并两个row source的过程是串行的,但是可以并行访问这两个row source(如并行读入数据,并行排序)。

  SMJ连接的例子:

  SQL> explain plan for

  select /*+ ordered */ e.deptno, d.deptno

  from emp e, dept d

  where e.deptno = d.deptno

  order by e.deptno, d.deptno;

  Query Plan

  -------------------------------------

  SELECT STATEMENT [CHOOSE] Cost=17

  MERGE JOIN

  SORT JOIN

  TABLE ACCESS FULL EMP [ANALYZED]

  SORT JOIN

  TABLE ACCESS FULL DEPT [ANALYZED]

  排序是一个费时、费资源的操作,特别对于大表。基于这个原因,SMJ经常不是一个特别有效的连接方法,但是如果2个row source都已经预先排序,则这种连接方法的效率也是蛮高的。

  2,嵌套循环(Nested Loops, NL)

  这个连接方法有驱动表(外部表)的概念。其实,该连接过程就是一个2层嵌套循环,所以外层循环的次数越少越好,这也就是我们为什么将小表或返回较小 row source的表作为驱动表(用于外层循环)的理论依据。但是这个理论只是一般指导原则,因为遵循这个理论并不能总保证使语句产生的I/O次数最少。有时 不遵守这个理论依据,反而会获得更好的效率。如果使用这种方法,决定使用哪个表作为驱动表很重要。有时如果驱动表选择不正确,将会导致语句的性能很差、很差。

  内部连接过程:

  Row source1的Row 1 —— Probe ->Row source 2

  Row source1的Row 2 —— Probe ->Row source 2

  Row source1的Row 3 —— Probe ->Row source 2

  ……。

  Row source1的Row n —— Probe ->Row source 2


  从内部连接过程来看,需要用row source1中的每一行,去匹配row source2中的所有行,所以此时保持row source1尽可能的小与高效的访问row source2(一般通过索引实现)是影响这个连接效率的关键问题。这只是理论指导原则,目的是使整个连接操作产生最少的物理I/O次数,而且如果遵守这 个原则,一般也会使总的物理I/O数最少。但是如果不遵从这个指导原则,反而能用更少的物理I/O实现连接操作,那尽管违反指导原则吧!因为最少的物理 I/O次数才是我们应该遵从的真正的指导原则,在后面的具体案例分析中就给出这样的例子。

  在上面的连接过程中,我们称Row source1为驱动表或外部表。Row Source2被称为被探查表或内部表。

  在NESTED LOOPS连接中,Oracle读取row source1中的每一行,然后在row sourc2中检查是否有匹配的行,所有被匹配的行都被放到结果集中,然后处理row source1中的下一行。这个过程一直继续,直到row source1中的所有行都被处理。这是从连接操作中可以得到第一个匹配行的最快的方法之一,这种类型的连接可以用在需要快速响应的语句中,以响应速度为 主要目标。

  如果driving row source(外部表)比较小,并且在inner row source(内部表)上有唯一索引,或有高选择性非唯一索引时,使用这种方法可以得到较好的效率。NESTED LOOPS有其它连接方法没有的的一个优点是:可以先返回已经连接的行,而不必等待所有的连接操作处理完才返回数据,这可以实现快速的响应时间。

  如果不使用并行操作,最好的驱动表是那些应用了where 限制条件后,可以返回较少行数据的的表,所以大表也可能称为驱动表,关键看限制条件。对于并行查询,我们经常选择大表作为驱动表,因为大表可以充分利用并 行功能。当然,有时对查询使用并行操作并不一定会比查询不使用并行操作效率高,因为最后可能每个表只有很少的行符合限制条件,而且还要看你的硬件配置是否 可以支持并行(如是否有多个CPU,多个硬盘控制器),所以要具体问题具体对待。

  NL连接的例子:

  SQL> explain plan for

  select a.dname,b.sql

  from dept a,emp b

  where a.deptno = b.deptno;

  Query Plan

  -------------------------

  SELECT STATEMENT [CHOOSE] Cost=5

  NESTED LOOPS

  TABLE ACCESS FULL DEPT [ANALYZED]

  TABLE ACCESS FULL EMP [ANALYZED]

  3,哈希连接(Hash Join, HJ)

  这种连接是在oracle 7.3以后引入的,从理论上来说比NL与SMJ更高效,而且只用在CBO优化器中。

  较小的row source被用来构建hash table与bitmap,第2个row source被用来被hansed,并与第一个row source生成的hash table进行匹配,以便进行进一步的连接。Bitmap被用来作为一种比较快的查找方法,来检查在hash table中是否有匹配的行。特别的,当hash table比较大而不能全部容纳在内存中时,这种查找方法更为有用。这种连接方法也有NL连接中所谓的驱动表的概念,被构建为hash table与bitmap的表为驱动表,当被构建的hash table与bitmap能被容纳在内存中时,这种连接方式的效率极高。

  HASH连接的例子:

  SQL> explain plan for

  select /*+ use_hash(emp) */ empno

  from emp, dept

  where emp.deptno = dept.deptno;

  Query Plan

  ----------------------------

  SELECT STATEMENT[CHOOSE] Cost=3

  HASH JOIN

  TABLE ACCESS FULL DEPT

  TABLE ACCESS FULL EMP

  要使哈希连接有效,需要设置HASH_JOIN_ENABLED=TRUE,缺省情况下该参数为TRUE,另外,不要忘了还要设置 hash_area_size参数,以使哈希连接高效运行,因为哈希连接会在该参数指定大小的内存中运行,过小的参数会使哈希连接的性能比其他连接方式还 要低。



最后,总结一下,在哪种情况下用哪种连接方法比较好:

  排序 - - 合并连接(Sort Merge Join, SMJ):

  a) 对于非等值连接,这种连接方式的效率是比较高的。

  b) 如果在关联的列上都有索引,效果更好。

  c) 对于将2个较大的row source做连接,该连接方法比NL连接要好一些。

  d) 但是如果sort merge返回的row source过大,则又会导致使用过多的rowid在表中查询数据时,数据库性能下降,因为过多的I/O.

  嵌套循环(Nested Loops, NL):

  a) 如果driving row source(外部表)比较小,并且在inner row source(内部表)上有唯一索引,或有高选择性非唯一索引时,使用这种方法可以得到较好的效率。

  b) NESTED LOOPS有其它连接方法没有的的一个优点是:可以先返回已经连接的行,而不必等待所有的连接操作处理完才返回数据,这可以实现快速的响应时间。

  哈希连接(Hash Join, HJ):

  a) 这种方法是在oracle7后来引入的,使用了比较先进的连接理论,一般来说,其效率应该好于其它2种连接,但是这种连接只能用在CBO优化器中,而且需要设置合适的hash_area_size参数,才能取得较好的性能。

  b) 在2个较大的row source之间连接时会取得相对较好的效率,在一个row source较小时则能取得更好的效率。

  c) 只能用于等值连接中

分享到:
评论

相关推荐

    oracle表的连接方式

    Oracle提供了三种主要的表连接方式:NESTED LOOP JOIN、HASH JOIN和SORT MERGE JOIN。每种方法都有其独特的应用场景和性能特点。 #### NESTED LOOP JOIN NESTED LOOP JOIN是一种简单的连接方式,适用于连接的数据...

    Oracle中hash join研究.pdf

    哈希连接(Hash Join)是Oracle数据库中的一种高效连接方法,主要针对等值连接操作,其引入旨在解决嵌套循环连接(Nested Loop Join)中的大量随机读取问题以及排序合并连接(Sort-Merge Join)中的排序成本过高问题...

    oracle认证详解Oracle的几种分页查询语句

    在Oracle中,表连接可能采用NESTED LOOP、HASH JOIN或MERGE JOIN等方式。对于分页查询而言,NESTED LOOP通常更为合适,因为它能够在返回的记录数达到指定上限时立即停止,而HASH JOIN需要处理完整个结果集才能返回...

    Oracle的三种表连接方式

    Oracle 的三种表连接方式是指在做表 join 的时候, Oracle 有三种方式,分别是:sort merge join(SMJ) ·nest loop(NL) ·hash join(HJ)。下面是对这三种策略的详细讲解: sort merge join(SMJ) sort merge join ...

    Greenplum内核揭秘之查询优化.pptx.pdf

    连接节点包括Nested Loop、Hash Join、Merge Join等。聚集节点包括Group By、Aggregate等。排序节点包括Sort等。 例如,下面是一个简单的查询计划: ``` QUERY PLAN --------------------------------------------...

    KingbaseES V8R3 执行计划详解.docx

    - **Nested Loop Join**:每次从一个表中取出一行,与另一个表的所有行进行匹配,适用于小表连接大表。 - **Materialize**:预先计算子查询的结果,避免重复计算,提高效率。 - **Merge Join**:基于排序的连接,...

    Oracle分页查询的实例详解

    对于多表联合查询,Oracle可能会使用嵌套循环(NESTED LOOP)、哈希连接(HASH JOIN)或归并连接(MERGE JOIN)。在分页查询中,由于有最大记录数限制,NESTED LOOP的优势在于一旦达到限制,可以立即停止,而HASH ...

    ORACLE面试锦集

    - **Nested Loop**: 最基本的连接方式,性能较低,适合小数据量。 #### 二、查看SQL执行计划的方法 了解SQL执行计划对于优化查询至关重要,以下是在ORACLE中不借助第三方工具查看SQL执行计划的方法: ##### 1. ...

    oracle核心技术读书笔记一附件1

    哈希连接(Hash Join)、嵌套循环连接(Nested Loop Join)和归并连接(Merge Join)是Oracle支持的三种主要的连接操作。CBO(Cost-Based Optimizer)是Oracle默认的优化器,它根据数据量和操作成本来选择执行计划。...

    oracle hints详细介绍

    - **Nested Loop Join (嵌套循环连接)**:使用`/*+ NESTED LOOPS(t1 t2) */`来强制执行器使用嵌套循环连接。 - **Hash Join (哈希连接)**:通过`/*+ HASH_JOIN(t1 t2) */`来强制执行器使用哈希连接。 - **Merge ...

    《Pro Oracle SQL》 读书笔记--Chapter 6--6.2 Execution Plans--之四

    - **连接操作**:如NLJ(Nested Loop Join)、Hash Join、Sort Merge Join等,用于合并多张表的数据。 - **其他操作**:如过滤(Filter)、排序(Sort)、并行执行(Parallel Execution)等。 4. **成本与选择性*...

    SQL语句的执行步骤和优化

    - 过程:对于涉及多张表的查询,Oracle可以选择不同的连接算法,包括Sort-Merge Join(SMJ)、Hash Join(HJ)和Nested Loop Join(NL)。 - 结果:选择最适合特定查询的连接方式。 7. **选择连接顺序**: - 目的:...

    db2 SQL优化

    DB2提供了多种连接方法,包括嵌套循环连接(nested loop join)、合并连接(merge join)以及散列连接(hash join)。每种方法都有其适用场景和限制条件。 - **嵌套循环连接**:这是一种简单但效率较低的连接方式。它通过...

    几种常用的表连接方式

    嵌套循环连接(Nested Loop Join) 嵌套循环连接是最直观的连接方法,其工作原理类似于两个列表的笛卡尔积运算。具体来说,嵌套循环连接首先选取一个较小的表作为驱动表(外部表),然后对这个表中的每一行,在另...

    oracle dba 笔试题

    - **Nested Loop**: 最简单的连接方法,适合小表或高选择性索引的情况。它首先完全遍历第一个表,然后对于第一个表的每一行,遍历第二个表寻找匹配项。 2. **查看SQL执行计划** 不依赖第三方工具,可以通过以下...

    Oracle优化器及执行计划.pdf

    - **嵌套循环连接(Nested Loop Join)**:适用于小表与大表之间的连接。 - **哈希连接(Hash Join)**:适用于两个大表之间的连接。 - **合并连接(Merge Join)**:适用于有序的数据集。 **4.2 如何生成执行计划** ...

    Oracle面试题

    - **NESTED LOOP (NL)**: 适用于其中一张表的查询结果非常小,或者连接条件较为复杂(如使用 `NOT IN` 等)的情况。这种连接方式先处理较小的表,然后对于每一条记录,在较大的表中寻找匹配项。 - **SORT MERGE (SM)...

Global site tag (gtag.js) - Google Analytics