讨论一下基于Master-Slave数据库模式的J2EE开发的框架选择

原文 http://www.iteye.com/topic/143714

新的公司的底层数据库是MySQL，由于访问量巨大，所以采用了Master-Slave模式。也就是对于Master的机器，可以进行写入操作，而对于 Slave的机器进行数据读取操作，他们互相之间的数据同步由MySQL底层来完成。通过这种方法，来降低数据库的压力。

在这种情况下，我们在开发J2EE引用时，整个持久层的设计就有点犯难。如果使用Hibernate这样的ORM框架，持久化操作是简单了，但是只能针对Master的机器作为DataSource去创建SessionFactory。此时，又不能对之进行查询操作，所以这种方案又不大合适。如果纯采用JDBC进行开发，我们就要在程序中去做一些人工的ORM的工作，毕竟类似Spring的JDBCTemplate，尚没有将ORM武装到牙齿。

我目前的想法，是依然采用Hibernate，针对Master数据库进行ORM映射。并作一些持久化操作和最简单的查询操作。对于Slave得数据库，采用JDBCTemplate进行查询。但是这种在程序中混用的方式，我总是感觉不是很舒服，而且还要经常区分，到底是哪台数据库。

对这种构架比较有经验的朋友一起来讨论一下。

你也可以按照类似的想法在JDBC Driver这一层做手脚：
读操作随机读取slave中的某个数据库
写操作写入master
返回顶楼
 
简单的解决办法是这样的：查询语句使用Hibernate的native SQL，可以在查询语句里面动态绑定不同的数据库表，实现动态查询不同的slave数据库

或者复杂一些，你可以钻研一下Hibernate Shards，这个是Google公司捐献给Hibernate的项目，利用Hibernate进行分布式数据库访问，做的相当不错。


CJDBC很不错，但是它怎么根据读写操作来进行访问区分呢？貌似使用RAIDb-1这种策略，在写操作时，它会在每个数据库节点进行数据复制。而这点似乎已经可以由MySQL自己完成了。

你也可以按照类似的想法在JDBC Driver这一层做手脚：读操作随机读取slave中的某个数据库写操作写入master
cjdbc真的很强，不过对mysql来说，在server端做raid1集群也有自己的优点，因为一个数据库如果是给多个应用来访问的话，比如php，用不上cjdbc的就搞不定数据的复制了。

同downpour讨论之后，觉得还是配置两个sessionfactory，readsessionfacotry和 writesessionfactory，在opensession in view里把readsessionfactory的session放到当前线程中，然后在更新，插入删除操作时使用 writesessionfactory里的session就可以了。这样可以保证读取是靠slave库，更新是用master库。

它是通过Connection的readonly属性来判断读/写操作，看样子你们在用spring，那么spring的默认查询事务设置readonly能够很好用在此处。

可以做一些试验，比较一下cjdbc/ha-jdbc和mysql自己的replication这2种不同的解决方案，看谁的代码简单以及性能更好.

2个session factory是不好的解决方案，会遇到更多的麻烦问题，你们也可以试验看看

权衡下来Replication Driver似乎是最好的选择，对于我程序来说是完全透明的，而且能最大程度满足需求。多谢Readonly的介绍。
返回顶楼


http://www.jroller.com/kenwdelong/entry/horizontal_database_partitioning_with_spring

这里有篇文章介绍如何使用spring/hibernate进行水平数据库分区的文章，很不错，推荐。
返回顶楼
         
确实在jdbc drvier层去实现区分M/S是最好的方式了。

这种方法甚至可以在不同的数据库之间完成读写区分的操作。恩，甚至把cache搬到driver中去实现。。。上层再加上个通用orm工具，haibernate或许就该退役了...
返回顶楼


你可以使用mysql proxy在数据库层实现，对应用是透明的。

我刚才很仔细的阅读了MySQL Proxy的文档，非常赞叹！另外我发现，MySQL Proxy的作者原来就是lighttpd的作者，难怪MySQL Proxy很多功能和lighttpd看起来那么似曾相识。MySQL Proxy做的很棒，用lua编写分发逻辑，实现读写分离也很酷，相信等MySQL Proxy正式发布以后，所有的MySQL用户，特别是用MySQL来跑大流量网站的用户都会欢欣鼓舞的。