`
tuhaitao
  • 浏览: 378726 次
  • 性别: Icon_minigender_1
  • 来自: 深圳
社区版块
存档分类
最新评论

MySQL单引号引起的严重性能问题

 
阅读更多

最近在工作中遇到一个MySQL update的严重性能问题,语句大概是这样的:

 

 

update t_user set fstate=0 where fuid in (11111, 22222, ....,  .....)

 

 

in后的括号中,有1000个fuid的样子

 

表结构如下:

 

 

t_user表结构

 

 

存储引擎是Innodb, 版本是MySQL 4.0.18 

 

其中fuid是主键, 由于表数据量在300W左右,所以刚开始更新很慢,我以为是表数据量太大引起的性能问题,

 

起初一直在寻求优化MySQL数据库配置,结果都是浮云,语句还是那么的慢。

 

 

偶然期发现自己用的是varchar字段类型,但却在赋值时没有加单引号:

 

对于varchar或者char字段里,如果只放数字类型的字符串,可以不加单引号执行SQL语句,不报错:

 

例如:

 

正常的写法是:

 

 

select  * from t_user where fuid='11111';

但你可以写这样写:

 

select  * from t_user where fuid=11111;

 

这条语句完全可以正常执行,但是表数据量很大的时候速度很慢。

 

 

但如果这样写:

 

select * from t_user where fuid=abcdef;

 

SQL执行时会报错,于是用explain分析:

 

在未加单引号时:

 

 

加入单引号时:

 

 

执行计划里type说明了问题所在,不加单引号的会造成全表扫描,所以表数据量越大速度越慢,找出了问题所在,

 

给原来的update语句加上了单引号,在300W数量级的表中,速度快了200倍的样子。

 

 

我在最新版本的MySQL 5.1里也实验过,同样有这个问题,百思不得其解,为什么MySQL在检查到where后查询条件

 

字段是varchar,不强制限制赋值必须用单引号,字母的可以检测到,但数字就不会。

 

 

如果有高人知道MySQL为什么这样做的原因可以告诉我,小弟不胜感激 :)

 

 

4
5
分享到:
评论
4 楼 tuhaitao 2012-02-25  
fengyie007 写道
参数类型与数据库类型不同,虽然能自转转换,但无法走索引,肯定慢了。

不是没发走索引,是木有索引可走,这是由于数据类型不一致,没办法比较,右值数据类型是int, 而左值存储的字段类型是varchar, mysql木有严格的检查数据类型,我估计是采用尝试的策略来转换数据类型,发现字段值可以转换成int,于是转换了改列所有的数据,由于记录数很多,所以造成了很慢,而后我又尝试将varchar字段里赋值为'asd测试' 这样的数据,发现mysql查询报错,这说明确实采用了运行时动态转换的原则,发现转换后的字符编码不再'0'-'9'的字符范畴,这里我觉得mysql以后的版本里最好限制这种隐式转换,不同的数据类型不让比较,便可以防止这种问题的发生:)
3 楼 tuhaitao 2011-11-23  
utensil 写道
原因是mysql不是把你的数字转成了字符串,而是把每个查询到的结果转成了数字去比较:

http://dev.mysql.com/doc/refman/5.0/en/how-to-avoid-table-scan.html

You are comparing indexed columns with constant values and MySQL has calculated (based on the index tree) that the constants cover too large a part of the table and that a table scan would be faster. See Section 7.3.1.2, “WHERE Clause Optimization”.

学习了
2 楼 utensil 2011-11-16  
原因是mysql不是把你的数字转成了字符串,而是把每个查询到的结果转成了数字去比较:

http://dev.mysql.com/doc/refman/5.0/en/how-to-avoid-table-scan.html

You are comparing indexed columns with constant values and MySQL has calculated (based on the index tree) that the constants cover too large a part of the table and that a table scan would be faster. See Section 7.3.1.2, “WHERE Clause Optimization”.
1 楼 fengyie007 2011-11-16  
参数类型与数据库类型不同,虽然能自转转换,但无法走索引,肯定慢了。

相关推荐

    在MySQL concat里面使用多个单引号,三引号的问题

    在动态拼接字符串时,我们常会用到字符拼接,我对拼接的引号不理解,如: 1、”’+ id +”’ 为什么是3个引号,为什么左边一个加号右边一个加号(能不能着重帮我解释下这个,详细点) SQL code sum(case Leave when...

    关于Mysql查询带单引号及插入带单引号字符串问题

    在MySQL查询中,正确处理带有单引号的字符串至关重要,因为单引号是SQL语句中的特殊字符,未正确处理可能导致语法错误或者更严重的安全问题,如SQL注入攻击。SQL注入是恶意用户通过输入带有特殊SQL命令的数据来操纵...

    解决sqoop2导入hdfs单引号问题

    使用sqoop2从mysql导入hadoop时,导入的数据带单引号。是由于sqoop2的一个bug导致,该包上传到sqoop_home/server/lib替换原来的jar包后,重启sqoop server,即可解决。

    解决python 执行sql语句时所传参数含有单引号的问题

    MySQL数据库解析SQL时,单引号用于定义字符串常量,如果在字符串内直接出现单引号,不进行转义,就会导致解析错误。 为了解决这个问题,我们可以使用字符串的replace()函数来替换参数中的单引号。在Python中,单...

    JSP向MYSQL插入单引号内容出错的解决方法.pdf

    JSP 向 MySQL 插入单引号内容出错是 Web 开发中常见的问题。该问题的出现是由于 SQL 语句中使用单引号作为字符串的标志,而单引号在 SQL 对参数中的特殊字符较敏感所致。在本文中,我们将分析该问题的原因并提供两种...

    一个单引号引发的MYSQL性能问题分析

    标题提到的“一个单引号引发的MYSQL性能问题分析”实际上是指在查询字符串类型主键时,是否使用单引号对查询效率的差异。 首先,我们要明白的是,数据库中的字段类型决定了数据的存储方式和查询方式。在描述中提到...

    解决python3插入mysql时内容带有引号的问题

    本文将详细介绍如何解决这个问题,并探讨在Python中执行MySQL语句时遇到单引号和双引号的处理方法。 首先,当内容中包含引号时,我们可以使用反斜杠(\)进行转义。例如,如果字符串中有一个单引号('),我们需要将其...

    MySQL性能常见原因分析

    常见的MySQL性能问题可能由多种原因引起,包括主机资源瓶颈、服务器和操作系统配置不当、以及MySQL本身的配置问题。主机资源瓶颈可能包括CPU核数不足、CPU利用率过高、负载过大、磁盘I/O写入(WIO)的百分比高,以及...

    高性能MySQL.pdf

    总的来说,《高性能MySQL》全面介绍了MySQL的各个方面,旨在帮助读者提升数据库的运行效率,解决实际工作中的性能问题。无论你是初学者还是经验丰富的DBA,都能从中受益匪浅。通过学习书中的内容,你将能够更好地...

    js拼接工具,省去手动带单引号或双引号的痛苦

    个人开发的一款JS拼接工具,代码挺简单的,不过挺实用,欢迎大家测试,向我提出bug。 主要应用在JS拼接,省去了你直接打单引号或者双引号的痛苦。

    高性能mysql 第四版 英文版 PDF下载 [high performance mysql 4th edition PDF]

    3. **监控和诊断**:介绍如何有效地监控MySQL的性能指标,及时发现和解决问题,以及如何进行性能分析和故障排查。 4. **备份与恢复**:详细阐述备份策略的重要性,包括冷备份、热备份、增量备份和快照等方法,以及...

    高性能mysql源码.rar

    深入学习MySQL源码,不仅能帮助我们理解数据库内部运作机制,还可以让我们更好地针对特定场景进行定制化开发和性能优化,解决实际问题。例如,通过源码分析,开发者可以了解SQL执行的详细过程,优化查询语句;或者...

    MySQL管理之道 性能调优、高可用与监控 绝对完整PDF版1

    附光盘性能调优高可用与监控 》从作者贺春旸的实际工作经验出发 针对生产环境MySQL5 5分别从故障处理 高可用 性能优化等角度系统地阐述了数据库运维过程中需要注意的地方及解决问题的思路 并针对2013年2月Oraclel自...

    python实现mysql的单引号字符串过滤方法

    本文实例讲述了python实现mysql的单引号字符串过滤方法。分享给大家供大家参考,具体如下: 最主要用这个函数,可以处理MySQLdb.escape_string(content). class Guide: def __init__(self): self.time_zone = 7*...

    mysql语句如何插入含单引号或反斜杠的值详解

    在进行MySQL数据库操作时,我们常常需要插入包含特殊字符的数据,其中单引号(')和反斜杠(\)是最常见的特殊字符。它们在SQL语句中具有特殊的意义,如果不加以处理,就会导致语法错误,从而影响数据的插入。本文将...

    千金良方:MySQL性能优化金字塔法则.docx

    然而,随着数据量的不断增加和业务需求的不断增长,MySQL的性能问题也越来越突出。因此,对MySQL数据库进行性能优化已经成为提高应用程序性能和可靠性的关键因素。 MySQL性能优化金字塔法则是由一位知名MySQL专家...

Global site tag (gtag.js) - Google Analytics