表有千万数据怎么办

0 0

表有千万数据怎么办5

由于种种历史原因，有张业务表的数据累积了一千万
大概1千个用户，每个用户拥有的数据量是没规律，最高可能有200万，最少可能才1条。
原来表是MyISAM，加了索引后增删查改还是挺快的，现在有个业务要事务回滚，改成InnoDB，感觉速度慢了一倍都不止。
不管怎么样，这表还是要拆分才行，请问有没什么拆分规则可以参考一下。

MySQL

2013年12月05日 16:58

huangsky
4
0 1 13

4个答案按时间排序按投票排序

0 0

hash散列数据到多个表；若今后还有其它业务数据要存储，建议再按业务做一个分库；目前我们的日志系统就是这么做的，一个业务下多少子业务线就有多少个库，其次表按照hash散列100或者500不等表数据，根据个人数据量来恒定。

2013年12月11日 01:04

sosojustdo
33
0 0 3

添加评论

0 0

我记得以前我们是按照时间分的，oracle的，dba做的，我们用户不用管

2013年12月06日 12:07

sprite311
326
1 1 42

添加评论

0 0

怎么会乱啊？
难道你一次查询出1000W条？
不都是分页吗？一页显示100条而已。有什么乱的呀，无非就是 N个select的语句。
这是唯一方法吧。还有其他的查询方法吗？
一个用户的数据在一个表里面啊？
用户 11 就是第一个表，12，第二个表，13 第三个表，14第四个表，21 第一个表，

这个不就是一个用户数据肯定在一个表里面了吗？
多个用户的数据在一个表里面呀。

你说的散列就是查询数据做统计的时候不好弄。就是分页。

10张表，默认从第一张表，查询数据，

创建一张 count表 myisam 引擎就可以，配置一个禁止锁表的条件。要不你用innodb引擎吧，还带事务。
记录这 10张表的 count数量。
为10张表都创建一个增删的触发器，来触发 count表的数据
count表
id    tablename        recordcount
         表名                记录数

表1，表2，，，，，表10

查询的时候，默认从主表查询，表1   。 10 张表的总记录数肯定知道，根据总记录数可以知道总页数，然后可以知道一共多少页。
然后每个表的记录数也知道，那么每个表的总页数也知道。每个表的页数也知道。

例如：

总页数是100页，
表1是 1-10页，表2是1-20页，表3是1-15页。依次类推

下标是1,2,3,4,5,6,7,8，，，，，100

点击每一页的时候，看看是不是当前表的最大总页数，如果是，切换到下一张表，当点击11的时候，就是表2的数据了。以此类推。

不知道我这种是否可行。