大型数据库应用方案

 

业务数据增长迅速，几近百G。该如何管理：必须有一整套的方案了。

 

目标：兼顾效率和安全。主要考虑的问题是效率。

 

1.系统软硬件解决方案

 

服务器：改善CPU，IO系统的效率。使用RAID1或者RAID5，防止硬件损坏带来的损失。配置合理的双机系统，群集系统。

 

数据库系统：企业版本的操作系统，数据库系统。

 

 

2.备份恢复机制

 

通过对业务数据的分析，考虑到备份还原的性能，对数据分类进行备份：

历史业务数据：切分历史数据，单独并行访问，光盘刻录备份。

当前业务数据：本地和异地的完整备份；通过使用BCP、bulk insert、bulk copy API，进行文本级别的快速异地备份；在灾难来临后，可以进行快速恢复，不至于中断业务。

 

以往备份方案多为推送式，建议使用拉式分布备份。

 

3.性能方案

 

必须在设计的开始就考虑性能问题。减少表的个数，尽量少使用表。

 

分割表格：历史查询中，很多都可以根据时间进行分割。将数据存储在不同的数据库中，或者不同的表中。分割一个超级大表，可以提高SQLSever的效率。

 

缓存数据：在历史表中，记录计算的列，对计算的列进行预先求值，使用空间换时间。

 

合理的高效的索引：分区缓存后的数据，应合理分配索引。

 

压力测试：对极端情况进行模拟，测试，找到影响性能的关键。

 

4.安全方案

 

详见前文http://ideage.iteye.com/blog/309036

 

5.专业的DBA

要使上述方案能良好执行，达到目标，必须使用专业的DBA，进行专业的管理，不断的对当前问题进行跟踪维护。这样才能稳健扎实，推陈出新，基业长青。否则，一蹴而就，必然会亡羊补牢。