`
dicmo
  • 浏览: 68513 次
  • 性别: Icon_minigender_1
  • 来自: 成都
社区版块
存档分类
最新评论

数据库查询select原理

阅读更多
我并非专业DBA,但做为B/S架构的开发人员,总是离不开数据库,一般开发员只会应用SQL的四条经典语句:select ,insert,delete,update。但是我从来没有研究过它们的工作原理,这篇我想说一说select在数据库中的工作原理。B/S架构中最经典的话题无非于三层架构,可以大概分为数据层,业务逻辑层和表示层,而数据层的作用一般都是和数据库交互,例如查询记录。
我们经常是写好查询SQL,然后调用程序执行SQL。但是它内部的工作流程是怎样的呢?先做哪一步,然后做哪一步等,我想还有大部分朋友和我一样都不一定清楚。
 
第一步:应用程序把查询SQL语句发给服务器端执行。
我们在数据层执行SQL语句时,应用程序会连接到相应的数据库服务器,把SQL语句发送给服务器处理。
第二步:服务器解析请求的SQL语句。
1:SQL计划缓存,经常用查询分析器的朋友大概都知道这样一个事实,往往一个查询语句在第一次运行的时候需要执行特别长的时间,但是如果你马上或者在一定时间内运行同样的语句,会在很短的时间内返回查询结果。
原因:
1):服务器在接收到查询请求后,并不会马上去数据库查询,而是在数据库中的计划缓存中找是否有相对应的执行计划,如果存在,就直接调用已经编译好的执行计划,节省了执行计划的编译时间。

2):如果所查询的行已经存在于数据缓冲存储区中,就不用查询物理文件了,而是从缓存中取数据,这样从内存中取数据就会比从硬盘上读取数据快很多,提高了查询效率.数据缓冲存储区会在后面提到。

2:如果在SQL计划缓存中没有对应的执行计划,服务器首先会对用户请求的SQL语句进行语法效验,如果有语法错误,服务器会结束查询操作,并用返回相应的错误信息给调用它的应用程序。
注意:此时返回的错误信息中,只会包含基本的语法错误信息,例如select 写成selec等,错误信息中如果包含一列表中本没有的列,此时服务器是不会检查出来的,因为只是语法验证,语义是否正确放在下一步进行。

3:语法符合后,就开始验证它的语义是否正确,例如,表名,列名,存储过程等等数据库对象是否真正存在,如果发现有不存在的,就会报错给应用程序,同时结束查询。

4:接下来就是获得对象的解析锁,我们在查询一个表时,首先服务器会对这个对象加锁,这是为了保证数据的统一性,如果不加锁,此时有数据插入,但因为没有加锁的原因,查询已经将这条记录读入,而有的插入会因为事务的失败会回滚,就会形成脏读的现象。

5:接下来就是对数据库用户权限的验证,SQL语句语法,语义都正确,此时并不一定能够得到查询结果,如果数据库用户没有相应的访问权限,服务器会报出权限不足的错误给应用程序,在稍大的项目中,往往一个项目里面会包含好几个数据库连接串,这些数据库用户具有不同的权限,有的是只读权限,有的是只写权限,有的是可读可写,根据不同的操作选取不同的用户来执行,稍微不注意,无论你的SQL语句写的多么完善,完美无缺都没用。

6:解析的最后一步,就是确定最终的执行计划。当语法,语义,权限都验证后,服务器并不会马上给你返回结果,而是会针对你的SQL进行优化,选择不同的查询算法以最高效的形式返回给应用程序。例如在做表联合查询时,服务器会根据开销成本来最终决定采用hash join,merge join ,还是loop join,采用哪一个索引会更高效等等,不过它的自动化优化是有限的,要想写出高效的查询SQL还是要优化自己的SQL查询语句。
当确定好执行计划后,就会把这个执行计划保存到SQL计划缓存中,下次在有相同的执行请求时,就直接从计划缓存中取,避免重新编译执行计划。

第三步:语句执行。

服务器对SQL语句解析完成后,服务器才会知道这条语句到底代表了什么意思,接下来才会真正的执行SQL语句。
些时分两种情况:
1):如果查询语句所包含的数据行已经读取到数据缓冲存储区的话,服务器会直接从数据缓冲存储区中读取数据返回给应用程序,避免了从物理文件中读取,提高查询速度。
2):如果数据行没有在数据缓冲存储区中,则会从物理文件中读取记录返回给应用程序,同时把数据行写入数据缓冲存储区中,供下次使用。

说明:SQL缓存分好几种,这里有兴趣的朋友可以去搜索一下,有时因为缓存的存在,使得我们很难马上看出优化的结果,因为第二次执行因为有缓存的存在,会特别快速,所以一般都是先消除缓存,然后比较优化前后的性能表现,这里有几个常用的方法:

DBCC DROPCLEANBUFFERS

从缓冲池中删除所有清除缓冲区。

DBCC FREEPROCCACHE

从过程缓存中删除所有元素。

DBCC FREESYSTEMCACHE
  从所有缓存中释放所有未使用的缓存条目。SQL Server 2005 数据库引擎会事先在后台清理未使用的缓存条目,以使内存可用于当前条目。但是,可以使用此命令从所有缓存中手动删除未使用的条目。
这只能基本消除SQL缓存的影响,目前好像没有完全消除缓存的方案,如果大家有,请指教。

结论:只有知道了服务执行应用程序提交的SQL的操作流程才能很好的调试我们的应用程序。
1:确保SQL语法正确;
2:确保SQL语义上的正确性,即对象是否存在;
3:数据库用户是否具有相应的访问权限。

注:文章来源自互联网
  • 大小: 41.3 KB
41
8
分享到:
评论
11 楼 zzc_zj 2010-12-14  
很好的知识点,学习了
10 楼 dai03070609 2010-12-14  
[url][/url][flash=200,200][/flash]
[b]
[i][/i][u][/u]
引用

    [*]
[img][/img][url][/url][flash=200,200][/flash]
[/b]
9 楼 364902709 2010-12-14  
楼主,我初学,问一下。sql语句-缓存找到,这个不进行用户权限验证了?
8 楼 dengzhangtao 2010-12-13  
多谢分享~  学习中
7 楼 zapldy 2010-12-09  
  讲得不错,如果能拿出一两个具体的数据库例子来讲,我觉得会让人信服和幸福,比如mysql,oracle,db2,sqlserver的一种。期待中......加油!
6 楼 chenhua_xy 2010-12-09  
请问lz这是哪个数据库实现的原理?oracle与其它数据库的许多实现原理都不一样。
5 楼 龙拳鬼步 2010-12-08  
不错。。。
4 楼 mozhengxin 2010-12-07  
呵呵 继续加油
3 楼 smzd 2010-12-07  
写得好! 
2 楼 jallin 2010-12-03  
学习了!非常感谢!
1 楼 躁动的绵羊 2010-11-30  
虽然来自互联网,但博主能找出来分享,还是不错的,我想对很多人都有帮助的

相关推荐

    从一条select语句看oracle数据库查询原理

    "从一条select语句看oracle数据库查询原理" Oracle数据库查询原理是Oracle数据库的核心机制之一,从一条select语句我们可以了解到Oracle数据库的查询过程,从客户端到服务器端的整个过程。这篇文章将一步步地解释...

    数据库原理SQL查询练习题

    本节内容涵盖了数据库原理和SQL查询的多个知识点,包括SELECT语句、WHERE语句、多表连接、子查询、EXISTS语句、NOT IN语句、NOT EXISTS语句等。这些知识点都是数据库设计和开发的基础概念,掌握这些知识点对于数据库...

    数据库SQL SELECT查询的工作原理

    数据库SQL SELECT查询是Web开发中不可或缺的部分,理解其工作原理对于优化数据库性能至关重要。下面将详细解释SELECT查询在数据库中的执行流程。 首先,应用程序通过连接到数据库服务器来发送SELECT语句。这一过程...

    数据库实验2的实验报告1. 在 studentsdb 数据库中使用 SELECT 语句进行基本查询。 (1)在 student

    实验报告主要围绕数据库查询展开,涉及SQL语言中的SELECT语句及其相关子句的使用,包括基本查询、条件查询、GROUP BY、ORDER BY、UNION、嵌套查询和连接查询等。以下是具体的知识点详解: 1. **SELECT基本查询**: ...

    数据库原理课程实验报告.doc

    【查询操作】实验四讲解了如何使用SQL查询语言来检索数据,这包括简单的选择(SELECT)操作,以及可能涉及连接(JOIN)、聚合(GROUP BY)、分组(HAVING)和排序(ORDER BY)等复杂查询。 【视图创建与删除】实验...

    学校数据库ppt数据库原理,浅显易懂

    数据库原理是计算机科学中的核心课程,它涉及到数据的组织、存储和检索,是信息系统和软件开发的基础。这个“学校数据库ppt”显然是一份专门讲解数据库原理的教学资源,旨在以浅显易懂的方式帮助学习者理解复杂的...

    04735数据库系统原理_2022年4月线上实践题(含答案、自学考试大纲)

    考生需要通过这些实践题目来提升对数据库操作的理解,包括创建表、插入数据、更新数据、删除数据以及使用各种查询语句(如SELECT,JOIN,子查询等)来解决问题。 其次,自学考试大纲是指导学习的蓝图,2018版的...

    数据库系统原理4375历年真题()

    你需要熟悉SELECT语句的用法,包括投影、选择、连接和分组,以及子查询、聚合函数、窗口函数等复杂查询。此外,DML(数据操纵语言)如INSERT、UPDATE、DELETE也常出现在试题中。 事务处理是数据库系统保证数据一致...

    吉林大学数据库原理实验报告.docx

    本实验报告讲解了数据库原理的基本概念和操作,涵盖了数据库设计、数据模型、查询语言、数据库系统架构等方面的知识点。以下是实验报告的详细知识点总结: 数据库设计 * 数据库设计是指在数据库系统中对数据库的...

    数据库系统原理课件免费下载

    课件可能涵盖SQL的基本语法,如SELECT查询、INSERT、UPDATE和DELETE操作,以及更复杂的子查询、连接和视图。 6. **数据库完整性**:确保数据的准确性和一致性。这包括实体完整性(主键约束)、参照完整性和用户定义...

    数据库基本原理ppt

    本文将深入探讨标题"数据库基本原理ppt"所涵盖的四个主要章节:数据库基本原理、Access数据库基础知识、库和表以及查询。 首先,让我们从第一部分——数据库基本原理开始。数据库是一个有组织地存储数据的系统,它...

    数据库原理自考考试题

    例如,`SELECT`语句用于查询数据,`INSERT`用于插入数据,`UPDATE`用于更新数据,而`DELETE`则用于删除数据。 3. **ER模型与概念设计**:实体-关系(ER)模型是一种图形表示方法,用于描述数据库的概念设计。实体...

    数据库原理及运用实验四SQL连接查询.doc

    数据库原理及运用实验四 SQL 连接查询 本实验报告主要探讨了数据库原理的应用,通过 SQL 连接查询实现了多种复杂的查询操作。以下是实验报告的详细解释: 一、数据库原理 数据库原理是数据库系统的基础理论,它...

    数据库原理A实验报告三.doc

    (2)查询没有选修【数据库原理】课程的学生信息 (3)查询其他系中比计算机系学生年龄都小的学生 (4)查询被0602001学生或0602002学生所选修的课程的课程号(用UNION组合查询与IN条件查询两种方法实现) (5)查询...

    数据库管理系统原理与设计第3版

    1. 查询语言:SQL是数据库查询的标准语言,学习如何构造SELECT语句,实现复杂查询,如联接、子查询、聚合函数等。 2. 插入、更新和删除:INSERT、UPDATE、DELETE语句用于添加、修改和删除数据,理解并发控制和事务...

    数据库系统原理及应用教程PPT课件

    本课程会详细解析SQL的四大基本操作——SELECT(查询)、INSERT(插入)、UPDATE(更新)和DELETE(删除),以及如何创建和管理数据库对象,如表、视图、索引等。 3. SQL Server 2000架构:讲解SQL Server 2000的...

    数据库系统原理-实验报告

    【数据库系统原理-实验报告】 本实验主要涵盖了数据库的基本操作,包括数据库的创建、表的构建、数据的插入以及SQL查询语句的编写。实验基于IBM DB2 UDB V8.2平台,针对班级数据库进行了一系列操作,涉及学生(S)...

    郑州大学《数据库原理》题库2.pdf

    - **常用命令**:例如CREATE TABLE用于创建表,SELECT用于查询数据,INSERT INTO用于插入数据,UPDATE用于更新数据,DELETE FROM用于删除数据等。 #### 4. 数据库设计 - **需求分析**:通过对用户需求进行调查和...

Global site tag (gtag.js) - Google Analytics