MYSQL CPU 占用 100% 的现象描述 早上帮别人一台服务器解决了 Mysql cpu 占用 100% 的问题。稍整理了一下,将经验记录在这篇文章里:《解决一个 MySQL 服务器进程 CPU 占用 100%的技术笔记》
朋友的主机(Windows 2003 + IIS + PHP + MYSQL )近来 MySQL 服务进程 (mysqld-nt.exe) CPU 占用率总为 100% 高居不下。此主机有10个左右的 database, 分别给十个网站调用。据朋友测试,导致 mysqld-nt.exe cpu 占用奇高的是网站A,一旦在 IIS 中将此网站停止服务,CPU 占用就降下来了。一启用,则马上上升。
MYSQL CPU 占用 100% 的解决过程 今天早上仔细检查了一下。目前此网站的七日平均日 IP 为2000,PageView 为 3万左右。网站A 用的 database 目前有39个表,记录数 60.1万条,占空间 45MB。按这个数据,MySQL 不可能占用这么高的资源。 于是在服务器上运行命令,将 mysql 当前的环境变量输出到文件 output.txt: d:\web\mysql> mysqld.exe --help >output.txt
发现 tmp_table_size 的值是默认的 32M,于是修改 My.ini, 将 tmp_table_size 赋值到 200M: d:\web\mysql> notepad c:\windows\my.ini [mysqld] tmp_table_size=200M 然后重启 MySQL 服务。CPU 占用有轻微下降,以前的CPU 占用波形图是 100% 一根直线,现在则在 97%~100%之间起伏。这表明调整 tmp_table_size 参数对 MYSQL 性能提升有改善作用。但问题还没有完全解决。
于是进入 mysql 的 shell 命令行,调用 show processlist, 查看当前 mysql 使用频繁的 sql 语句: mysql> show processlist;
反复调用此命令(每秒刷两次),发现网站 A 的两个 SQL 语句经常在 process list 中出现,其语法如下: SELECT t1.pid, t2.userid, t3.count, t1.date FROM _mydata AS t1 LEFT JOIN _myuser AS t3 ON t1.userid=t3.userid LEFT JOIN _mydata_body AS t2 ON t1.pid=t3.pid ORDER BY t1.pid LIMIT 0,15
调用 show columns 检查这三个表的结构 : mysql> show columns from _myuser; mysql> show columns from _mydata; mysql> show columns from _mydata_body;
终于发现了问题所在:_mydata 表,只根据 pid 建立了一个 primary key,但并没有为 userid 建立索引。而在这个 SQL 语句的第一个 LEFT JOIN ON 子句中: LEFT JOIN _myuser AS t3 ON t1.userid=t3.userid _mydata 的 userid 被参与了条件比较运算。于是我为给 _mydata 表根据字段 userid 建立了一个索引: mysql> ALTER TABLE `_mydata` ADD INDEX ( `userid` ) 建立此索引之后,CPU 马上降到了 80% 左右。看到找到了问题所在,于是检查另一个反复出现在 show processlist 中的 sql 语句: SELECT COUNT(*) FROM _mydata AS t1, _mydata_key AS t2 WHERE t1.pid=t2.pid and t2.keywords = '孔雀'
经检查 _mydata_key 表的结构,发现它只为 pid 建了了 primary key, 没有为 keywords 建立 index。_mydata_key 目前有 33 万条记录,在没有索引的情况下对33万条记录进行文本检索匹配,不耗费大量的 cpu 时间才怪。看来就是针对这个表的检索出问题了。于是同样为 _mydata_key 表根据字段 keywords 加上索引: mysql> ALTER TABLE `_mydata_key` ADD INDEX ( `keywords` ) 建立此索引之后,CPU立刻降了下来,在 50%~70%之间震荡。
再次调用 show prosslist,网站A 的sql 调用就很少出现在结果列表中了。但发现此主机运行了几个 Discuz 的论坛程序, Discuz论坛的好几个表也存在着这个问题。于是顺手一并解决,cpu占用再次降下来了。
解决 MYSQL CPU 占用 100% 的经验总结
增加 tmp_table_size 值。mysql 的配置文件中,tmp_table_size 的默认大小是 32M。如果一张临时表超出该大小,MySQL产生一个 The table tbl_name is full 形式的错误,如果你做很多高级 GROUP BY 查询,增加 tmp_table_size 值。 这是 mysql 官方关于此选项的解释:
tmp_table_size This variable determines the maximum size for a temporary table in memory. If the table becomes too large, a MYISAM table is created on disk. Try to avoid temporary tables by optimizing the queries where possible, but where this is not possible, try to ensure temporary tables are always stored in memory. Watching the processlist for queries with temporary tables that take too long to resolve can give you an early warning that tmp_table_size needs to be upped. Be aware that memory is also allocated per-thread. An example where upping this worked for more was a server where I upped this from 32MB (the default) to 64MB with immediate effect. The quicker resolution of queries resulted in less threads being active at any one time, with all-round benefits for the server, and available memory. 对 WHERE, JOIN, MAX(), MIN(), ORDER BY 等子句中的条件判断中用到的字段,应该根据其建立索引 INDEX。索引被用来快速找出在一个列上用一特定值的行。没有索引,MySQL不得不首先以第一条记录开始并然后读完整个表直到它找出相关的行。表越大,花费时间越多。如果表对于查询的列有一个索引,MySQL能快速到达一个位置去搜寻到数据文件的中间,没有必要考虑所有数据。如果一个表有1000行,这比顺序读取至少快100倍。所有的MySQL索引(PRIMARY、UNIQUE和INDEX)在B树中存储。 根据 mysql 的开发文档: 索引 index 用于: 快速找出匹配一个WHERE子句的行 当执行联结(JOIN)时,从其他表检索行。 对特定的索引列找出MAX()或MIN()值 如果排序或分组在一个可用键的最左面前缀上进行(例如,ORDER BY key_part_1,key_part_2),排序或分组一个表。如果所有键值部分跟随DESC,键以倒序被读取。 在一些情况中,一个查询能被优化来检索值,不用咨询数据文件。如果对某些表的所有使用的列是数字型的并且构成某些键的最左面前缀,为了更快,值可以从索引树被检索出来。
假定你发出下列SELECT语句:
mysql> SELECT * FROM tbl_name WHERE col1=val1 AND col2=val2; 如果一个多列索引存在于col1和col2上,适当的行可以直接被取出。如果分开的单行列索引存在于col1和col2上,优化器试图通过决定哪个索引将找到更少的行并来找出更具限制性的索引并且使用该索引取行。 开发人员做 SQL 数据表设计的时候,一定要通盘考虑清楚。
|
分享到:
相关推荐
### 解决 MySQL 服务器进程 CPU 占用 100% 的技术笔记 #### 现象描述 本文档详细记录了解决一起 MySQL 服务器进程 CPU 占用率达到 100% 的案例。该问题发生在一台 Windows 2003 服务器上,该服务器配置了 IIS、...
朋友主机(Windows 2003 + IIS + PHP + MYSQL )近来 ... MYSQL CPU 占用 100% 的解决过程 今天早上仔细检查了一下。目前此网站的七日平均日 IP 为2000,PageView 为 3万左右。网站A 用的 database 目前有39个表,记录数
### 服务器大量php-cgi.exe进程导致CPU占用100%的问题分析及解决方案 #### 一、问题背景 在IT运维领域中,服务器资源管理尤其是CPU利用率的监控至关重要。当出现服务器上的`php-cgi.exe`进程占用大量CPU资源的情况...
总的来说,解决MySQL服务CPU 100%的问题,需要综合运用监控、诊断和优化工具,结合业务逻辑和数据库特性,逐步排查并优化问题点。对于面试来说,掌握这些排查技巧不仅可以应对紧急问题,也是展现技术深度和解决问题...
### php-fpm 占用CPU过高,100%的解决方法 #### 一、问题背景与概述 在日常运维工作中,我们可能会遇到服务器资源占用过高的情况,尤其是在使用PHP和Nginx构建Web应用时。本文将详细介绍当php-fpm进程占用CPU达到...
在某个新服务器上,新建了一个MySQL的实例,该服务器上面只有MySQL这一个进程,但是CPU的负载却居高不下,使用top命令查询的结果如下: [dba_mysql@dba-mysql ~]$ top top - 17:12:44 up 104 days, 20 min, 2 ...
#适用于实时查询mysql占用CPU高的语句,循环监控mysql进程情况,当CPU大于一定的前执行中的SQL情况. #执行前,修改ENV认证部分 #编写:Chaoren #2022年3月4日18:38:53 # #对于执行时间非常短的SQL可能监控到的语句...
总结起来,解决MySQL服务器IO 100%问题需要综合考虑应用设计、数据库配置和硬件能力。通过优化SQL语句、调整参数设置和升级硬件,可以有效地缓解IO压力,提升系统性能。在实际操作中,还需要根据业务的具体需求和...
通过使用top命令,我们发现MySQL进程占用了大量CPU资源。使用 show processlist; 命令,我们发现有两条查询语句始终在执行中。这些查询语句来自xxx网站,拥有30多万条记录。 三、解决方案 1. tmp_table_size 变量...
如果出现“PID file could not be found”的错误,可能需要通过`kill`命令找到并终止MySQL进程。 5. **检查配置文件**: 检查MySQL的配置文件`my.cnf`,确保`pid-file`选项指向正确的PID文件位置。例如: ``` ...
- **监控MySQL性能**:使用系统自带的工具如`top`或`htop`来实时监控MySQL进程的CPU占用率。 ### 3. 分析SQL执行情况 - **使用`SHOW PROCESSLIST`命令**:以MySQL管理员身份登录MySQL,执行`SHOW PROCESSLIST`命令...
7. **升级硬件**:如果上述方法无法解决问题,可能需要考虑提升服务器硬件性能,如增加CPU核数、提高内存容量等。 通过以上分析,我们可以看到,"MySQL数据库CPU飙升及烂sql记录"是一个多方面的问题,需要从多个...
本文将讨论三种方法来加快 MySQL 服务器的运行速度:替换有问题的硬件,对 MySQL 进程的设置进行调优和对查询进行优化。 替换有问题的硬件 替换有问题的硬件是提高 MySQL 服务器性能的第一考虑。数据库会占用大量...
- **定义**: 当MySQL进程崩溃时,可以生成一个核心转储文件(core dump),用于调试和分析故障原因。 - **作用范围**: 全局级别。 - **配置**: 不支持在配置文件中设置。 #### datadir=PATH,-hPATH - **定义**: ...
### MySql 1067错误解决方法 在日常使用MySQL数据库的过程中,我们经常会遇到各种各样的问题,其中“1067错误”是较为常见的一种系统级别的错误提示。本篇文章将详细阐述MySQL 1067错误的具体含义、常见的触发场景...
"使用LoadRunner监控MySQL在Apache下占用CPU资源情况的方法"这个主题旨在教你如何使用LoadRunner这一强大的性能测试工具来监控MySQL数据库和Apache HTTP服务器在运行时的CPU利用率。这有助于识别潜在的性能瓶颈,并...
这是一个 MySQL 服务器内核和系统相关优化手册,旨在帮助 MySQL 数据库管理员和开发者了解 MySQL 服务器的性能优化技巧和方法。本手册涵盖了 MySQL 服务器的架构、系统瓶颈定位、性能优化、系统资源分配、存储设备...