`
风雪涟漪
  • 浏览: 508669 次
  • 性别: Icon_minigender_1
  • 来自: 大连->北京
博客专栏
952ab666-b589-3ca9-8be6-3772bb8d36d4
搜索引擎基础(Search...
浏览量:9069
Ae468720-c1b2-3218-bad0-65e2f3d5477e
SEO策略
浏览量:18484
社区版块
存档分类
最新评论

查询性能的优化 - 重新构建查询的方法 - 分解JOIN查询

阅读更多

分解JOIN查询

许多高性能的网站都分解了JOIN查询。你可以用查询多张单独的表的方法来替代多表JOIN查询,并且之后在应用程序执行这个JOIN.举个例子,

 

mysql> SELECT * FROM tag
-> JOIN tag_post ON tag_post.tag_id=tag.id
-> JOIN post ON tag_post.post_id=post.id
-> WHERE tag.tag='mysql'

 

你可以使用如下语句替换

mysql> SELECT * FROM tag WHERE tag='mysql';
mysql> SELECT * FROM tag_post WHERE tag_id=1234;
mysql> SELECT * FROM post WHERE post.id in (123,456,567,9098,8904);

 

初次看上去的确很不错。这是因为查询语句多了,但是并没有返回结果。然而,这种结构能带来明显的性能提升:

 

  • 缓存是高效的。许多应用都缓存了直接和表映射的“对象”。在这个例子中,如果"tag mysql"对象被缓存了,上面的第一步查询就可以省略了。如果你发现post的id为123,567或9098在缓存中,你就可以把它们从in语句中除去。这种策略也可以给查询缓存带来好处。如果仅仅只有一张表常常的改变。分解JOIN也可以降低缓存的无效次数。
  • 对于MyISAM表,在每张表执行一个查询语句,使用表锁要更有效率:这个查询语句将会单独的锁定表并且比锁定它们很长时间的形式相对容易一些。
  • 在应用程序中使用JOIN的方法,比较有利于数据库的伸缩。因为可能会把表放到不同的数据库服务器上。
  • 查询自身是更有效率的。一个例子,使用IN替代一个JOIN会让MySQL排序行的ID和获取行要更好一些。以后我们会详细解释。
  • 会降低冗余行的读取。在应用中做JOIN意味着,你获取行仅仅需要一次。然而,一个在非范式的查询会重复访问相同的数据。由于此,这种结构也可以减少网络流量以及内存的使用。
  • 在一定程度上,你可以发现这项技术都是使用了hash join,而不是使用MySQL内置循环策略去执行一个JOIN.一个hash join会更高效。在这章的join策略中会详细说到。

小结:应用中的JOIN更有效的时候。

  • 你从先前查询的结果中缓存和重用了很多数据。
  • 大部分表都为MyISAM。
  • 数据是分布式的,这些数据很多都是在不同的数据库服务器上。
  • 在大表中,用IN()替代了JOIN.
  • 一个JOIN多次使用了相同的表。

 

 

 

 

分享到:
评论

相关推荐

    关系查询处理和查询优化

    4. **Hash Join方法**:通过在内存中构建哈希表,快速查找连接条件匹配的行。这种方法适用于大表之间的连接,但对内存需求较高。 综上所述,关系查询处理和查询优化是数据库系统中极其重要的部分,它们决定了查询的...

    trino优化宝典,trino优化宝典

    Razorpay通过优化Join操作和启用动态过滤,显著提高了查询性能,增强了Trino集群的整体弹性。 #### 四、要点总结和其他学习资源 ##### 4.1 要点总结 - 理解Trino的架构和查询执行流程是优化的基础。 - 合理配置...

    慢SQL优化In PostgreSQL

    可以编写脚本定期分析索引使用情况,并根据需要重新构建或优化它们。 #### 十五、索引大小对查询计划的影响 索引的大小直接影响查询规划器的选择。较小的索引通常意味着更快的搜索速度。可以通过调整索引策略来优化...

    05讲-数据查询与优化 new1

    在查询实现过程中,会将复杂的查询操作分解为基本的动作,如选择(Selection)、投影(Projection)、连接(Join)等,并通过组合这些基本动作来执行更复杂的查询。 以连接操作为例,逻辑层面的实现算法通常是对两...

    第五章分布查询的存取优化.ppt

    在优化过程中,系统会构建**逻辑查询计划树**,并转换为**物理查询计划**。**代价函数**被用来评估各种执行计划的成本,包括I/O代价、CPU代价和通信代价。这些成本会根据网络环境(如局域网LAN与广域网WAN的差异)...

    SQL查询的优化实现.pdf

    SQL查询优化是现代数据库管理技术中的核心内容,它直接关系到数据库系统的性能表现。在大数据时代背景下,数据量的剧增要求数据库能够快速响应用户的查询请求,提升用户体验。SQL查询优化策略的探讨,有助于系统地...

    oracle性能优化

    Oracle性能优化是一个复杂而深入的主题,它涉及到数据库的多个层面,包括SQL查询优化、索引策略、表设计、存储优化、资源管理以及数据库架构调整等。以下是对这些关键领域的详细阐述: 1. SQL查询优化:SQL是Oracle...

    SQL语句执行原理及性能优化.pdf

    SQL语句的性能优化涉及多个方面,不仅包括对SQL语句本身的编写,还涉及到对数据库内部运作机制的理解。 SQL语句性能不佳的主要原因有两个方面。首先,程序开发人员可能过分重视查询结果的正确性而忽略了查询语句...

    五种提高 SQL 性能的方法

    #### 二、LEFT JOIN与性能优化 **问题背景**:在查询设计中,使用`LEFT JOIN`可以确保即使右边的表没有匹配项时,左边表的所有行都会被返回。但不当的使用可能会导致性能下降。 **优化建议**: - **理解JOIN的逻辑...

    abap性能优化2.rar

    通过以上方法,我们可以有效地对ABAP代码进行性能优化,从而提升SAP系统的整体运行效率。在实际项目中,应结合业务需求和系统环境,灵活运用这些优化策略,持续改进代码质量,确保系统的稳定和高效运行。

    计算机软件-商业源码-查询数据库的最完美技巧.zip

    以上知识点涵盖了数据库查询的各个方面,从基础的SQL语法到高级的性能优化策略,都是商业源码中查询数据库时不可或缺的技能。通过深入理解和实践这些技巧,开发者可以更好地利用数据库资源,为业务提供高效、稳定的...

    SQL高级查询技术.doc

    它可以将复杂的查询逻辑分解为更小、更易管理的部分,使查询更加清晰、高效。 - **子查询的规则**: - 子查询必须用括号括起来。 - 子查询通常返回一个值或一系列值,用来替代表达式。 - 子查询中避免查询包含`...

    oracle数据库sql优化大全

    SQL性能优化是数据库管理中的核心任务,尤其是在Oracle数据库系统中,优化查询性能能够显著提升系统的整体效率。本文将围绕数据库查询优化从需求分析、设计和使用三个方面进行深入探讨。 首先,详细的需求分析是...

    查询树的优化PPT学习教案.pptx

    这些等价变换规则是查询优化的基础,通过它们,我们可以重新构造查询表达式,找到更高效的执行路径,尤其是在大型数据库系统中,这些优化策略对于提高查询速度和降低资源消耗至关重要。理解并掌握这些规则,有助于...

    基于分布式系统OceanBase的并行连接.pdf

    关键词“查询”、“semi-join”、“OceanBase”、“并行连接”反映了文章的主要研究内容,这些内容涵盖了数据库查询优化、分布式系统中的数据处理和并行计算等关键IT知识点。通过对这些技术的深入研究和实践应用,...

    mysql优化[参照].pdf

    MySQL查询优化是数据库性能提升的关键环节,涉及到多个步骤和策略。首先,MySQL解析器将SQL语句分解为一个个标记(tokens),构建出一个解析树,确保语法正确无误。如果出现错误,如语法错误,系统会在这一阶段抛出...

    S2-2-MySchool数据库设计优化(PPT+源码)【第九章】

    4. 查询优化:深入学习SQL查询语句的编写技巧,包括使用JOIN、子查询、连接操作等,以及如何避免全表扫描。理解执行计划和EXPLAIN命令,以分析查询性能并找出瓶颈。 5. 存储引擎选择:MySQL提供了多种存储引擎,如...

    总体技术方案2.docx

    这个总体技术方案旨在构建一个高效、可靠的大数据处理平台,通过优化的分布式数据管理和高性能查询技术,满足互联网和cs领域对于海量数据实时分析的需求。该方案的实施将推动云计算技术的发展,提升大数据处理能力,...

    基于 Impala 构建实时用户行为分析引擎.pdf

    另外,Impala还提供了丰富的性能优化策略。例如,通过分区策略可以减少查询范围,提高查询速度;使用统计信息(如表大小、列的唯一值数量等)进行查询优化;以及调整内存分配、并发查询设置等,以适应不同的业务场景...

Global site tag (gtag.js) - Google Analytics