`

SQL执行过程原理

 
阅读更多
如下图:
http://dl.iteye.com/upload/attachment/361467/e569587d-c62f-3e03-b09f-20925b13b4e7.jpg

第一步:应用程序把查询SQL语句发给服务器端执行。
我们在数据层执行SQL语句时,应用程序会连接到相应的数据库服务器,把SQL语句发送给服务器处理。
第二步:服务器解析请求的SQL语句。
1:SQL计划缓存,经常用查询分析器的朋友大概都知道这样一个事实,往往一个查询语句在第一次运行的时候需要执行特别长的时间,但是如果你马上或者在一定时间内运行同样的语句,会在很短的时间内返回查询结果。
原因:
1):服务器在接收到查询请求后,并不会马上去数据库查询,而是在数据库中的计划缓存中找是否有相对应的执行计划,如果存在,就直接调用已经编译好的执行计划,节省了执行计划的编译时间。

2):如果所查询的行已经存在于数据缓冲存储区中,就不用查询物理文件了,而是从缓存中取数据,这样从内存中取数据就会比从硬盘上读取数据快很多,提高了查询效率.数据缓冲存储区会在后面提到。

2:如果在SQL计划缓存中没有对应的执行计划,服务器首先会对用户请求的SQL语句进行语法效验,如果有语法错误,服务器会结束查询操作,并用返回相应的错误信息给调用它的应用程序。
注意:此时返回的错误信息中,只会包含基本的语法错误信息,例如select 写成selec等,错误信息中如果包含一列表中本没有的列,此时服务器是不会检查出来的,因为只是语法验证,语义是否正确放在下一步进行。

3:语法符合后,就开始验证它的语义是否正确,例如,表名,列名,存储过程等等数据库对象是否真正存在,如果发现有不存在的,就会报错给应用程序,同时结束查询。

4:接下来就是获得对象的解析锁,我们在查询一个表时,首先服务器会对这个对象加锁,这是为了保证数据的统一性,如果不加锁,此时有数据插入,但因为没有加锁的原因,查询已经将这条记录读入,而有的插入会因为事务的失败会回滚,就会形成脏读的现象。

5:接下来就是对数据库用户权限的验证,SQL语句语法,语义都正确,此时并不一定能够得到查询结果,如果数据库用户没有相应的访问权限,服务器会报出权限不足的错误给应用程序,在稍大的项目中,往往一个项目里面会包含好几个数据库连接串,这些数据库用户具有不同的权限,有的是只读权限,有的是只写权限,有的是可读可写,根据不同的操作选取不同的用户来执行,稍微不注意,无论你的SQL语句写的多么完善,完美无缺都没用。

6:解析的最后一步,就是确定最终的执行计划。当语法,语义,权限都验证后,服务器并不会马上给你返回结果,而是会针对你的SQL进行优化,选择不同的查询算法以最高效的形式返回给应用程序。例如在做表联合查询时,服务器会根据开销成本来最终决定采用hash join,merge join ,还是loop join,采用哪一个索引会更高效等等,不过它的自动化优化是有限的,要想写出高效的查询SQL还是要优化自己的SQL查询语句。
当确定好执行计划后,就会把这个执行计划保存到SQL计划缓存中,下次在有相同的执行请求时,就直接从计划缓存中取,避免重新编译执行计划。

第三步:语句执行。

服务器对SQL语句解析完成后,服务器才会知道这条语句到底代表了什么意思,接下来才会真正的执行SQL语句。
些时分两种情况:
1):如果查询语句所包含的数据行已经读取到数据缓冲存储区的话,服务器会直接从数据缓冲存储区中读取数据返回给应用程序,避免了从物理文件中读取,提高查询速度。
2):如果数据行没有在数据缓冲存储区中,则会从物理文件中读取记录返回给应用程序,同时把数据行写入数据缓冲存储区中,供下次使用。

说明:SQL缓存分好几种,这里有兴趣的朋友可以去搜索一下,有时因为缓存的存在,使得我们很难马上看出优化的结果,因为第二次执行因为有缓存的存在,会特别快速,所以一般都是先消除缓存,然后比较优化前后的性能表现,这里有几个常用的方法:

DBCC DROPCLEANBUFFERS

从缓冲池中删除所有清除缓冲区。

DBCC FREEPROCCACHE

从过程缓存中删除所有元素。

DBCC FREESYSTEMCACHE
  从所有缓存中释放所有未使用的缓存条目。SQL Server 2005 数据库引擎会事先在后台清理未使用的缓存条目,以使内存可用于当前条目。但是,可以使用此命令从所有缓存中手动删除未使用的条目。
这只能基本消除SQL缓存的影响,目前好像没有完全消除缓存的方案,如果大家有,请指教。

结论:只有知道了服务执行应用程序提交的SQL的操作流程才能很好的调试我们的应用程序。
1:确保SQL语法正确;
2:确保SQL语义上的正确性,即对象是否存在;
3:数据库用户是否具有相应的访问权限。
分享到:
评论

相关推荐

    sql执行过程_原理_优化

    oracle sql语句的执行过程和原理介绍,优化器模式,访问table的方式,表的连接方式及索引分类

    SQL语句执行过程详解

    SQL语句执行过程是一个涉及到客户端与服务器端交互、多个阶段的复杂过程,包含了对SQL语句的处理、解析、优化以及最终的执行。这个过程对于数据库管理员来说,需要对数据库内部结构有深入的了解,才能够完全掌握。 ...

    SQL查询原理及执行顺序

    本文将深入探讨SQL查询的执行过程,帮助读者理解如何构建高效查询。 #### SQL语句执行步骤 SQL查询的执行流程可以分为以下九个主要阶段: 1. **语法分析**:此阶段,数据库引擎检查SQL语句的语法正确性,确保其...

    sql注入攻击原理分析

    这些操作通常涉及对数据库执行更复杂的SQL命令,如联合查询、存储过程调用等。 #### 三、SQL注入防范措施 为了防止SQL注入攻击的发生,开发人员应当采取一系列的安全措施: - **参数化查询**:使用预编译的参数化...

    sql注入原理简介

    如果开发人员没有对这些输入进行严格的验证,恶意用户就能够通过输入特定的代码片段(如SQL语句),来控制数据库的执行过程。例如,在一个用于登录验证的SQL查询中,如果直接将用户名和密码拼接到SQL语句中,那么...

    SQL注入漏洞原理分析

    1. **基本原理**:当用户提交的数据作为SQL语句的一部分被直接执行时,如果该数据包含特殊字符或恶意构造的SQL命令,则可能导致SQL注入。例如,一个简单的查询语句可能是这样的: ```sql SELECT * FROM articles ...

    sql,编译原理课件

    在SQL的上下文中,编译原理尤为重要,因为数据库管理系统(如SQL Server 2000)在执行查询时,需要经历类似的编译过程。当用户提交一个SQL查询时,数据库系统首先进行词法和语法分析,然后对查询进行优化,比如决定...

    批量执行SQL脚本(附源码).zip

    本文将深入探讨批量执行SQL脚本的原理以及提供的源码实现。 首先,批量执行SQL脚本通常涉及到读取一个或多个包含SQL命令的文本文件,并依次执行这些命令。这种功能可以极大地提高工作效率,避免手动逐条输入SQL语句...

    SQL语句执行原理及性能优化.pdf

    SQL语句的执行原理涵盖了从客户端发送SQL语句到服务器端执行的整个过程。以Oracle数据库为例,这个过程可以分为以下几个步骤: 1. 客户端发送语句:客户端应用程序将SQL语句发送给数据库服务器端,请求数据库服务器...

    Hive SQL 编译过程详解

    - **Phase3 QueryBlock到OperatorTree**:QueryBlock进一步被转换为执行操作树(OperatorTree),这个树状结构表示了SQL语句的执行流程。 - **Phase4 逻辑层优化**:在这个阶段,Hive的逻辑层优化器会对Operator...

    java批量执行SQL

    本文将详细介绍如何利用Java进行批量SQL执行,包括其背景、实现原理、代码示例及优化策略等。 #### 一、批量执行SQL的背景与意义 在日常的业务场景中,如用户注册、数据迁移或系统初始化等,往往涉及到大量的数据...

    通过分析SQL语句的执行计划优化SQL

    递归SQL是指那些在执行过程中可能调用自身或其他SQL语句的查询。正确处理递归SQL可以避免不必要的重复计算,提高查询效率。 5. **Rowsource和Predicate的优化**: Rowsource是指SQL查询中数据的来源,而Predicate...

    HiveSQL编译原理

    执行过程中可能涉及数据的读取、转换和写回,最终返回查询结果给用户。 在Java开发中,Hive的编译过程涉及到许多Java类和接口,如HiveLexer、HiveParser、SemanticAnalyzer等。开发者可以利用这些工具进行自定义的...

    oracle sql语句执行流程解析

    执行过程中,服务器会对数据进行查询和处理,然后返回结果给客户端。在执行完SQL语句之后,如果该语句将会被再次执行,那么其执行计划可能会被保存到数据高速缓存中,以便下次可以直接使用,省略语法、语义和权限...

    《SQL Server数据库原理及应用》

    在SQL Server特有的功能方面,书中有专门章节讲解了 Transact-SQL (T-SQL) 扩展,这是SQL Server独有的查询语言,包含了用于数据库维护、错误处理和流程控制的额外命令。另外,还有关于SQL Server的集成服务(SSIS)...

    DB查询分析器批量执行多条SQL语句并查看各自的执行时间

    在数据库管理和维护过程中,频繁需要执行一系列SQL语句。然而,大多数数据库管理系统(DBMS)并未提供直观的方式展示每条SQL语句的具体执行时间。这导致了在调试或优化SQL性能时存在一定的挑战。为了弥补这一不足,...

    打印JdbcTemplate执行sql

    在Java世界中,Spring框架是应用最广泛的IoC...通过正确配置日志系统,我们可以轻松获取SQL执行的详细信息,这在开发和运维过程中都具有重要的价值。同时,这也为我们提供了优化数据库操作和提升系统性能的途径。

    oracle sql执行过程(流程图)

    Oracle SQL执行过程是一个复杂而精细的流程,它涉及到多个阶段,确保查询语句能够高效、准确地执行。以下是对这个过程的详细解析: 1)**语法分析**: 在SQL语句被提交给数据库引擎后,首先进行的是语法分析。这个...

    ORACLE中SQL执行原理及性能优化研究.pdf

    在Oracle数据库中,SQL执行原理及其性能优化是一个关键的话题,对于提升系统性能具有重大意义。SQL性能优化并非单纯地理解语法就能确保效率,它是一个系统性的工程,涉及到多个层面。 首先,了解SQL语句的执行过程...

    借鉴p6spy,实现自己的SQL执行监控器项目源代码

    在IT行业中,数据库操作是应用程序的核心部分,而SQL执行监控对于优化数据库性能、排查问题以及确保数据安全性至关重要。P6Spy是一个广泛使用的开源框架,它允许开发者无侵入地监控和记录应用程序中的所有SQL语句。...

Global site tag (gtag.js) - Google Analytics