`
步青龙
  • 浏览: 297982 次
  • 性别: Icon_minigender_1
  • 来自: 杭州
博客专栏
72ba33fb-eefe-3de1-bd65-82a6e579265d
Java面试
浏览量:0
社区版块
存档分类
最新评论

Mysql大数据库测试和一些用法

阅读更多

 

1:全表前100W条的所有数据

----------------------------------------------------

[SQL] select * from e_enterprise limit 1000000

 

影响的数据栏: 0

时间: 38.219ms

 

 

2:全表前100W条的id数据

----------------------------------------------------

[SQL] select id from e_enterprise limit 1000000

 

影响的数据栏: 0

时间: 1.187ms

 

 

3:全表前100W条的count(id)数据

----------------------------------------------------

[SQL] select count(id) from e_enterprise limit 1000000

 

影响的数据栏: 0

时间: 0.563ms

 

 

4:全表前100W条的count(*)数据

----------------------------------------------------

[SQL] select count(*) from e_enterprise limit 1000000

 

影响的数据栏: 0

时间: 0.531ms

 

数据实时的不一致,即使数据不变的查询的时间也不一样

 

在印象中count(id)总比count(*)要快的,但是我看了一下测试结果竟然count(*)更快,id是一个主键,怎么会这样呢?

 

下面是测试数据,数据说明了一切

----------------------------------------------------

[SQL] select count(id) from e_enterprise limit 1000000;

影响的数据栏: 0

时间: 0.578ms

 

[SQL] 

select count(*) from e_enterprise limit 1000000;

影响的数据栏: 0

时间: 0.532ms

----------------------------------------------------

[SQL] select count(*) from e_enterprise;

影响的数据栏: 0

时间: 0.532ms

 

[SQL] 

select ROW_COUNT() from e_enterprise;

影响的数据栏: 0

时间: 1.282ms

--------------------------------------

[SQL] select count(1) from e_enterprise limit 1000000;

影响的数据栏: 0

时间: 0.532ms

 

[SQL] 

select count(*) from e_enterprise limit 1000000;

影响的数据栏: 0

时间: 0.531ms

 

测试:500万条数据,表有聚集索引(id+时间字段),还有其它字段 

 

count(*)与count(id):运行结果一样,速度几乎相同,均为13 " 

count(*)与count(其他非空字段):非空字段无索引,结果相同,均为13 " 

count(*)与count(其他有空的字段):有空字段无索引,前者13 ",后者1分多钟 

 

可见: 

若id不为空,count(*)与count(id)效率差不多 

若id有空,count(*)比count(id)记录要多,但效率却要高,原因是count(*)直接统计记录总数,而count(id)还要判断id的值是否为空,因此降低了效率 

 

下面是一些Mysql的用法(可能很少用)

 

1. 取得关于 information_schema的基本信息

查询所有的数据库  show databases;  

2.use information_schema; 

3.查询所有的表show tables;  

4.超过1000行的表 

select concat(table_schema,'.',table_name) as table_name,table_rows  

from information_schema.tables where table_rows > 1000 order by table_rows desc; 

5.没有主键的表

SELECT CONCAT(t.table_name,".",t.table_schema) as table_name  

FROM information_schema.TABLES t  

LEFT JOIN information_schema.TABLE_CONSTRAINTS tc  

ON t.table_schema = tc.table_schema  

AND t.table_name = tc.table_name  

AND tc.constraint_type = 'PRIMARY KEY'  

WHERE tc.constraint_name IS NULL  

AND t.table_type = 'BASE TABLE';   

 

下面是执行多个delete from 表 与 delete from 表 where id in (个数相同) 测试性能比较结果如下

Mysql5.1 window xp下

1:数据一千多左右

 

[SQL] delete  from qa_questions where id  = 100;

影响的数据栏: 0

时间: 0.015ms

 

[SQL] 

delete  from qa_questions where id  = 101;

影响的数据栏: 1

时间: 0.032ms

 

[SQL] 

delete  from qa_questions where id  = 102;

影响的数据栏: 0

时间: 0.015ms

 

[SQL] 

delete  from qa_questions where id  = 103;

影响的数据栏: 1

时间: 0.016ms

 

[SQL] 

delete  from qa_questions where id  = 104;

影响的数据栏: 1

时间: 0.015ms

 

[SQL] 

delete  from qa_questions where id  = 105;

影响的数据栏: 1

时间: 0.015ms

 

[SQL] 

delete  from qa_questions where id  = 106;

影响的数据栏: 1

时间: 0.016ms

 

[SQL] 

delete  from qa_questions where id  = 107;

影响的数据栏: 1

时间: 0.016ms

 

[SQL] 

delete  from qa_questions where id  = 108;

影响的数据栏: 1

时间: 0.015ms

 

[SQL] 

delete  from qa_questions where id  = 109;

影响的数据栏: 1

时间: 0.015ms

 

[SQL] 

delete  from qa_questions where id in(

200,201,202,203,204,205,206,207,208,209

)

 

 

影响的数据栏: 9

时间: 0.016ms

分析:执行一条的where id = 与where id in(xx,xx,xx,.......) 时间差 千分之一

2:数据量32万左右

[SQL] delete  from e_template where id  = 100;

影响的数据栏: 1

时间: 0.078ms

 

[SQL] 

delete  from e_template where id  = 101;

影响的数据栏: 1

时间: 0.031ms

 

[SQL] 

delete  from e_template where id  = 102;

影响的数据栏: 1

时间: 0.016ms

 

[SQL] 

delete  from e_template where id  = 103;

影响的数据栏: 1

时间: 0.032ms

 

[SQL] 

delete  from e_template where id  = 104;

影响的数据栏: 1

时间: 0.016ms

 

[SQL] 

delete  from e_template where id  = 105;

影响的数据栏: 1

时间: 0.031ms

 

[SQL] 

delete  from e_template where id  = 106;

影响的数据栏: 1

时间: 0.016ms

 

[SQL] 

delete  from e_template where id  = 107;

影响的数据栏: 1

时间: 0.000ms

 

[SQL] 

delete  from e_template where id  = 108;

影响的数据栏: 1

时间: 0.032ms

 

[SQL] 

delete  from e_template where id  = 109;

影响的数据栏: 1

时间: 0.000ms

 

[SQL] 

delete  from e_template where id in(

200,201,202,203,204,205,206,207,208,209

)

 

影响的数据栏: 10

时间: 0.016ms

 

分析:从三十多万的数据可以看到  id  = 100;时间: 0.078ms 而 where id in(

200,201,202,203,204,205,206,207,208,209) 只用了 0.016ms,此时有的where id  = 是where id in(xx,xx,xx,....)消耗时间的4倍多

所有的删除加起来执行效率id=是in的  78+31+16+32+16+31+16+0+32+0/ 16倍,id=消耗的时间大约是where in的15倍多时间

3:我感觉数据量越大1000万以上越能体现 where id in 的优势。数据量大id = 反而没有id in(xx,xx,xx,...)删除多个性能好了。(其实数据1000多和三十二万的效率来讲 id = 差不多都是 id in的十几倍耗费时间,三十二万这种差距相比数据量1k又大多了。)

 

 

 

分享到:
评论

相关推荐

    MySQL数据库备份和恢复

    ### MySQL数据库备份与恢复:深度解析与实践指南 在当今数据驱动的世界中,数据库的稳定性和数据的安全性显得尤为重要。MySQL作为全球最流行的开源关系型数据库管理系统之一,其备份和恢复策略是确保数据安全和系统...

    Java访问MySQL数据库的测试程序

    在这个场景中,我们有一个名为"Java访问MySQL数据库的测试程序"的项目,它是一个小型的应用程序,主要用于验证和实践如何使用Java语言来连接并操作MySQL数据库,执行基本的CRUD(创建Create、读取Read、更新Update、...

    mysql数据库安装及测试

    ### MySQL 数据库安装与测试详解 #### 一、MySQL 数据库简介 MySQL 是一款非常流行的开源关系型数据库管理系统,因其高性能、稳定性和易用性而被广泛应用于各种规模的应用程序中。MySQL 支持多种操作系统,包括 ...

    基于MySQL的数据库服务器性能测试.pdf

    MySQL数据库服务器性能测试的重要性 数据库服务器是CSNS谱仪靶站控制系统的核心组件,负责存储和处理大量的数据。因此,选择合适的数据库服务器对于整个系统的性能和稳定性至关重要。本文的工作主要对基于MySQL的...

    mysql数据库测试报告

    ### MySQL数据库测试报告知识点解析 #### 一、建表数量测试与Inodes限制 - **知识点1:Inodes与表创建限制** Inodes(节点)是文件系统的元数据结构,用来存储文件属性和权限等信息。创建MySQL表的数量上限受到...

    测试mysql数据库链接(java)

    本文详细介绍了如何通过Java程序测试MySQL数据库连接的方法。具体包括加载MySQL JDBC驱动、建立数据库连接、执行SQL查询以及处理查询结果等关键步骤。此外,还强调了异常处理的重要性,这对于开发健壮的应用程序至关...

    mysql 重置数据库密码方法

    ”使用 mysql 数据库。执行,“update user set password=PASSWORD("rootadmin") where user='root';”(修改 root 的密码)。 最后,打开 MySQL 目录下的 my.ini 文件,删除最后一行的“skip-grant-tables”,保存...

    数据库测试程序测试数据库

    数据库测试是软件开发过程中的重要环节,主要目的是确保...在实际应用中,数据库测试程序通常会结合各种技术和方法,以全面评估数据库系统的质量。理解并掌握这些知识点,对于确保数据库的可靠性和高效运行至关重要。

    MySQL数据库运维.pdf

    总之,这门课程涵盖了MySQL数据库运维的各个方面,从基础的系统规划和安装,到复杂的性能优化和安全控制,再到关键的备份与恢复策略,旨在培养出具备全面MySQL运维能力的专业人士。通过深入学习,学员将能够应对各种...

    nodejs封装好的mysql数据库模块,带mysql连接池以及百万测试数据

    本模块基于Node.js实现了对MySQL数据库的封装,利用了mysql连接池来优化性能,并且包含了用于测试的百万级数据,确保了在大数据量场景下的稳定性和效率。以下将详细介绍该模块的关键知识点: 1. **Node.js与MySQL**...

    VB6.0连接MySQL数据库

    配置完毕后,可以测试DSN以确保MySQL数据库能够被成功连接。 3. VB6.0代码中添加数据库连接 在VB6.0的开发环境中,可以通过引用Microsoft ActiveX Data Objects(ADO)来实现与数据库的交互。首先,在VB6.0的项目中...

    C#实现备份、还原MySql数据库

    对于使用MySQL数据库的系统,定期备份和恢复数据库可以防止数据丢失,确保业务连续性。本篇将详细讲解如何使用C#语言来实现MySQL数据库的备份与还原功能,并探讨如何通过线程设置定时自动备份。 首先,我们需要了解...

    java连接mysql数据库(JDBC驱动).

    ### Java连接MySQL数据库(JDBC驱动) #### 软件下载 - **MySQL**: 版本 4.1.11 下载地址: [http://dev.mysql.com/downloads/mysql/4.1.html](http://dev.mysql.com/downloads/mysql/4.1.html) - **JDBC驱动**: ...

    mysql自带的测试用数据库

    通过这个测试数据库,初学者可以全面了解MySQL的使用,熟练掌握数据库的设计、查询、管理和维护等技能。同时,对于有经验的开发者来说,也可以用它来进行性能测试、查询优化或者新的数据库设计实践。

    mysql百万级测试数据下载 300W条

    在IT行业中,数据库测试是软件开发过程中的关键环节,尤其是对于大规模系统而言,拥有大量真实世界的测试数据至关重要。本文将围绕“mysql百万级测试数据下载 300W条”这个主题,深入探讨如何处理和利用这样的大数据...

    MySql数据库连接池C#代码(有注释含测试代码)

    总的来说,这个代码示例提供了一个基础的MySQL数据库连接池实现,可以作为学习和开发的起点。然而,正如描述中提到的,代码可能存在优化空间,比如错误处理、性能调优等方面,建议开发者根据具体需求进行修改和完善...

    MySQL数据库笔试试题及答案(全)

    根据给定文件的信息,我们可以总结出一系列关于MySQL数据库的基础知识点,涵盖了SQL语言的基本操作、数据检索、表结构管理以及高级特性等内容。以下是针对文件中提到的一些关键知识点的详细解释: ### 1. 聚合函数 ...

    简单JAVA写的mysql数据库帮助类与测试示例

    在这个"简单JAVA写的mysql数据库帮助类与测试示例"中,我们有两个核心文件:`MySqlConn - 副本.java`和`TestMySqlConn - 副本.java`。 首先,让我们了解`MySqlConn - 副本.java`,这通常是一个数据库连接帮助类,它...

    MySQL数据库安装与使用

    本文详细介绍了MySQL数据库的安装与使用方法,并通过一个具体的学生表分页查询案例展示了如何在实际项目中应用MySQL。MySQL作为一款优秀的数据库系统,对于任何级别的开发者来说都是一个不可或缺的工具。通过本文的...

Global site tag (gtag.js) - Google Analytics