论坛首页 Java企业应用论坛

讨论一下基于Master-Slave数据库模式的J2EE开发的框架选择

浏览 33874 次
该帖已经被评为良好帖
作者 正文
   发表时间:2007-11-26  
新的公司的底层数据库是MySQL,由于访问量巨大,所以采用了Master-Slave模式。也就是对于Master的机器,可以进行写入操作,而对于Slave的机器进行数据读取操作,他们互相之间的数据同步由MySQL底层来完成。通过这种方法,来降低数据库的压力。

在这种情况下,我们在开发J2EE引用时,整个持久层的设计就有点犯难。如果使用Hibernate这样的ORM框架,持久化操作是简单了,但是只能针对Master的机器作为DataSource去创建SessionFactory。此时,又不能对之进行查询操作,所以这种方案又不大合适。如果纯采用JDBC进行开发,我们就要在程序中去做一些人工的ORM的工作,毕竟类似Spring的JDBCTemplate,尚没有将ORM武装到牙齿。

我目前的想法,是依然采用Hibernate,针对Master数据库进行ORM映射。并作一些持久化操作和最简单的查询操作。对于Slave得数据库,采用JDBCTemplate进行查询。但是这种在程序中混用的方式,我总是感觉不是很舒服,而且还要经常区分,到底是哪台数据库。

对这种构架比较有经验的朋友一起来讨论一下。

   发表时间:2007-11-26  
cjdbc or ha-jdbc 都有提供类似的功能
check out
http://www.iteye.com/topic/10448

你也可以按照类似的想法在JDBC Driver这一层做手脚:
读操作随机读取slave中的某个数据库
写操作写入master
2 请登录后投票
   发表时间:2007-11-26  
简单的解决办法是这样的:查询语句使用Hibernate的native SQL,可以在查询语句里面动态绑定不同的数据库表,实现动态查询不同的slave数据库

或者复杂一些,你可以钻研一下Hibernate Shards,这个是Google公司捐献给Hibernate的项目,利用Hibernate进行分布式数据库访问,做的相当不错。

2 请登录后投票
   发表时间:2007-11-26  
CJDBC很不错,但是它怎么根据读写操作来进行访问区分呢?貌似使用RAIDb-1这种策略,在写操作时,它会在每个数据库节点进行数据复制。而这点似乎已经可以由MySQL自己完成了。
2 请登录后投票
   发表时间:2007-11-26  
[quote="Readonly"] cjdbc or ha-jdbc 都有提供类似的功能 check out [url]http://www.iteye.com/topic/10448[/url] 你也可以按照类似的想法在JDBC Driver这一层做手脚:读操作随机读取slave中的某个数据库写操作写入master [/quote]

cjdbc真的很强,不过对mysql来说,在server端做raid1集群也有自己的优点,因为一个数据库如果是给多个应用来访问的话,比如php,用不上cjdbc的就搞不定数据的复制了。

同downpour讨论之后,觉得还是配置两个sessionfactory,readsessionfacotry和writesessionfactory,在opensession in view里把readsessionfactory的session放到当前线程中,然后在更新,插入删除操作时使用writesessionfactory里的session就可以了。这样可以保证读取是靠slave库,更新是用master库。

2 请登录后投票
   发表时间:2007-11-26  
针对Master/Slave,Mysql的jdbc driver自带一个ReplicationDriver:
http://dev.mysql.com/doc/refman/5.1/en/connector-j-reference-replication-connection.html

它是通过Connection的readonly属性来判断读/写操作,看样子你们在用spring,那么spring的默认查询事务设置readonly能够很好用在此处。

可以做一些试验,比较一下cjdbc/ha-jdbc和mysql自己的replication这2种不同的解决方案,看谁的代码简单以及性能更好.

2个session factory是不好的解决方案,会遇到更多的麻烦问题,你们也可以试验看看
2 请登录后投票
   发表时间:2007-11-27  
权衡下来Replication Driver似乎是最好的选择,对于我程序来说是完全透明的,而且能最大程度满足需求。多谢Readonly的介绍。
2 请登录后投票
   发表时间:2007-11-28  
http://www.jroller.com/kenwdelong/entry/horizontal_database_partitioning_with_spring

这里有篇文章介绍如何使用spring/hibernate进行水平数据库分区的文章,很不错,推荐。
2 请登录后投票
   发表时间:2007-11-28  
确实在jdbc drvier层去实现区分M/S是最好的方式了。

这种方法甚至可以在不同的数据库之间完成读写区分的操作。恩,甚至把cache搬到driver中去实现。。。上层再加上个通用orm工具,haibernate或许就该退役了...
2 请登录后投票
   发表时间:2007-11-28  
你可以使用mysql proxy在数据库层实现,对应用是透明的。
2 请登录后投票
论坛首页 Java企业应用版

跳转论坛:
Global site tag (gtag.js) - Google Analytics