首先是如何检查SQL的效率.
1.善用explain:
设计SQL后,应使用explain命令检查SQL,看是否使用到索引,是否存在filesort,重点检查检索的行数(rows)是否太大。
一般来说.
rows<1000,是在可接受的范围内的。
rows在1000~1w之间,在密集访问时可能导致性能问题,但如果不是太频繁的访问(频率低于1分钟一次),又难再优化的话,可以接受,但需要注意观察
rows大于1万时,应慎重考虑SQL的设计,优化SQL,优化db,一般来说不允许频繁运行(频率低于1小时一次)。
rows达到10w级别时,坚决不能做为实时运行的SQL。但导数据场合除外,但导数据必须控制好时间,频度。
explain SQL语句应该是日常开发中的习惯动作,有时explain出来的结果,可能会出于偏离设计的意料之外,所以
**强烈建议在设计SQL,尤其是稍微复杂的SQL时,一定要在测试环境甚至是实际环境上预先进行explain**
2.MySQL慢查询日志
一般应打开MySQL的慢查询日志(在my.cnf中加入log_slow_queries和long_query_time两个参数),会记录所有查询持续时间超过long_query_time的SQL语句,把这些语句log下来之后,再一一分析(explain)优化。
3.监视当前进程
登陆MySQL,使用show processlist查看正在运行的SQL语句,如果正在运行的语句太多,运行时间太长,表示MySQL效率有问题。必要的时候可以将对应的进程kill掉。
4.系统命令
使用top/vmstat等系统命令来检查MySQL进程占用的cpu,内存,以及磁盘IO量。
对MySQL优化的文章很多,这里只提几点平时工作中比较常用到的方法。
◆建表时,显式指定使用innodb数据库引擎,而不是myisam,myisam引擎的锁是表锁,读锁和写锁是互斥的,读写操作是串行的,锁冲突会严重影响并发.而innodb提供行级锁,能提供较好的并发表现,在我们的业务场景里,也不会引起死锁。
◆善用索引,对SQL语句where条件里使用到的字段,合理建立索引。虽然对表建立索引一定程度上会影响写入效率,但在表数据规模不大,写入压力不是特别高的情况下,索引带来的好处是更多的。
◆当SQL语句是
由代码动态生成的,如在运行时根据用户操作加入不同的where参数,应在测试阶段对SQL生成的典型情况和边界情况进行测试,看是否有可能造成性能问题。并应适当生成一些日志,供提取最终生成的SQL进行效率分析。
◆对数据应合理分库分表,由应用层去动态的选择库和表。MySQL的innodb表虽然理论上可以装海量的数据,但在我们的业务场景下,数据控制在500w以下会比较合理,追求性能的话,最好控制在200w以下,合理索引。
◆需要联合查询时善用left join/right join而不是直接多表联合,怎么用,查manul ^_^
◆尽量不要使用select套select的复合查询,如果能拆开,尽量拆开,多条精悍的SQL,组合起来可能就是一条庞大的SQL,应该避免。
◆善用cache,将不常修改的,数据量有限的,又是被密集查询的信息,加载到cache里,可以有效的降低数据库压力。在一般的业务场景里,推荐使用开源memcache,简单高效。
◆如果一些逻辑可以放到应用层去完成,可以考虑放到应用层去完成。但如果将SQL逻辑分拆到应用层可能导致对数据更频繁的访问的话,那么需要考虑修改应用逻辑,数据结构,或回到合理的联合查询上来。
比如某些数据的排序可以load到php数组里,再sort.又比如需要查询A,B两个表,A表里的数据是B表里某个字段的对照说明(如A:t_service表,B.t_task表),A表数据量有限,可以做联合查询,也可以先将A表先load到进程或内存里,用hash结构cache起来,再查B表,然后在cache里依次查询hash,获得对照说明。
◆关于导数据和统计性查询.导数据在计算和磁盘io上对数据库压力都会很大,应在时间和空间上合理分摊数据库压力如果需要导出批量的特定数据做分析,应建立专供数据分析的数据库服务器,或者建立临时库表,先导出数据,再在上面做分析运算。
导数据等可能引起批量数据读取的操作,应建立定时任务,在数据库不繁忙的时段(凌晨1~7时)运行一般的统计操作,对实时性要求都不会太高(5~10分钟以上,甚至一天,一周等),这种数据不应在每次访问时运行库中直接count,group,而是应该由定时任务导出,建立结果表或中间结果表,供最终用户使用。
◆生产数据库上的操作权限应严格控制,而开发人员在生产数据库上直接运行SQL语句,要尽量慎重。
能做到以上这些,基本上可以算MySQL以及相关系统优化入门,可以保证不要让我们的数据库整天累趴下了。
最后,即使做足了功课,也还是要例行的对数据库运行情况进行观察,监控,尽早发现其性能瓶颈,在未造成危害前解决掉。
分享到:
相关推荐
Redis 架构下的 MySQL 数据库性能提升浅析,Redis 的三种理解和 Redis 中的数据结构选择对于 MySQL 数据库性能提升都起着至关重要的作用。通过合理地选择和使用 Redis,能够提高 MySQL 数据库的性能,满足业务发展对...
ORACLE数据库连接配置浅析及故障排除
本文主要针对新能源汽车的不充电故障和动力电池故障报警灯点亮的问题进行了深入浅析。 1. 充电故障的诊断与排除 - 慢充不充电的故障主要表现为警告灯闪亮,可能是由于输入电压不正常、充电枪或充电线连接问题、...
通过读取故障码并参照维修手册和电路图可以定位并排除故障。 3. 驱动电机系统绝缘测试: - 驱动电机的绝缘性能直接影响车辆的安全运行。测试步骤包括确保个人防护、断开低压电池、拔掉电机控制器插头、确认无高压...
自动化机床的故障排除技术浅析doc,自动化机床的故障排除技术浅析
概述:本文档旨在对MySQL数据库的效能和技巧进行浅析,涵盖了 MySQL 数据库的基本概念、数据类型、数据表、数据操作、系统管理命令等方面的知识点。 一、MySQL数据库概述 MySQL数据库是一种关系型数据库管理系统...
浅析宽带路由器的使用与故障排除.pdf
本文主要探讨了新能源汽车的两种主要充电方式——慢充和快充中遇到的问题,以及动力电池故障报警灯点亮的情况,同时也涉及到了驱动电机系统和电动汽车空调的绝缘故障排除。 首先,对于慢充不充电的故障,故障现象...
ORACLE数据库连接配置浅析及故障排除.pdf
新能源汽车的维修与故障诊断是现代汽车技术中的一个重要领域,特别是在电动汽车快速发展的今天,了解和掌握新能源汽车的常见故障及排除方法至关重要。本篇文档主要针对新能源汽车的充电问题和动力电池故障进行了深入...
浅析宽带路由器的使用与故障排除 (2).pdf
数据迁移需要从mysql导入clickhouse, 总结方案如下,包括clickhouse自身支持的三种方式,第三方工具两种。 create table engin mysql CREATE TABLE [IF NOT EXISTS] [db.]table_name [ON CLUSTER cluster] ( name1...
分别是:光损耗测试设备(又称光万用表或光功率计)、故障定位器(故障跟踪器)、光纤识别器。 1、光损耗测试设备(由光万用表和光功率计组合而成) 光功率计: 用于测量光功率或通过一段光纤的光功率相对损耗。光...
标题中的“浅析交换机数字中继PCM故障”是指探讨通信网络中,交换机与远端设备通过PCM(Plesiochronous Digital Hierarchy,准同步数字体系)中继链路进行通信时可能出现的问题及解决策略。PCM是数字通信系统中广泛...
浅析MYSQL中的并发操作与锁定 MYSQL中的并发操作和锁定是数据库管理系统中非常重要的概念。并发操作是指多个线程或用户同时访问和操作同一个数据库表的能力,而锁定则是为了避免数据不一致和数据丢失所采取的一种...
### 浅析计算机主板故障及维修 随着计算机技术的飞速发展,计算机硬件尤其是主板的集成度越来越高,这虽然带来了性能的提升和成本的降低,但也使得主板的维修变得更为复杂。本文旨在介绍计算机主板故障的基本分类、...
此外,binlog也是实现主从复制的基础,使得数据可以实时地从主库同步到从库,从而支持读写分离和故障切换。 **1.2 基础知识** MySQL的binlog有两种格式:STATEMENT和ROW。STATEMENT格式记录了执行的SQL语句,而ROW...
MySQL数据库是当前最流行的关系型数据库管理系统之一,它具有优良的性能、简单的操作和免费的获取等特点。MySQL数据库的主要目标是快速、健壮和易用。MySQL数据库的主要组成部分包括mysqld服务守护程序、客户机或...
3. 自动分析和诊断:在电力系统出现异常时,继电保护装置可以快速识别故障区域、故障类型,并进行故障定位,为及时修复提供准确信息。 4. 提示异常工作状态:当设备出现不正常工作状况时,继电保护装置会发出信号,...