`
shangjava
  • 浏览: 1237231 次
  • 性别: Icon_minigender_1
  • 来自: 北京
文章分类
社区版块
存档分类
最新评论

基于memcached的SNA实现

阅读更多

系统要集群,使用SNA方案。
一、 缓存的处理
缓存要使用统一的缓存服务器,集中式缓存。
原先的实现采用ehcache。
在spring里的配置,以资源缓存为例:

  1. <!--EhCacheManager-->
  2. <beanid="cacheManager"class="org.springframework.cache.ehcache.EhCacheManagerFactoryBean">
  3. <propertyname="configLocation">
  4. <value>classpath:ehcache.xml</value>
  5. </property>
  6. </bean>
  7. <beanid="resourceCacheBackend"
  8. class="org.springframework.cache.ehcache.EhCacheFactoryBean">
  9. <propertyname="cacheManager"ref="cacheManager"/>
  10. <propertyname="cacheName"value="resourceCache"/>
  11. </bean>
  12. <beanid="resourceCache"
  13. class="com.framework.extcomponent.security.authentication.services.acegi.cache.EhCacheBasedResourceCache"
  14. autowire="byName">
  15. <propertyname="cache"ref="resourceCacheBackend"/>
  16. </bean>


cacheManager负责对ehcache进行管理,初始化、启动、停止。
resourceCacheBackend负责实际执行缓存操作,put 、get、remove。
resourceCache实现具有业务语义的业务应用层面的缓存操作,内部调用resourceCacheBackend操作。

现在采用memcached。
关于客户端,采用文初封装的客户端,地址在http://code.google.com/p/memcache-client-forjava/
使用spring的FactoryBean进行二次封装。同理:
memcachedManager负责对memcached进行管理,初始化、启动、停止。
代码:

  1. /**
  2. *User:ronghao
  3. *Date:2008-10-14
  4. *Time:10:36:30
  5. *管理Memcached的CacheManager
  6. */
  7. publicclassMemcachedCacheManagerFactoryBeanimplementsFactoryBean,InitializingBean,DisposableBean{
  8. protectedfinalLoglogger=LogFactory.getLog(getClass());
  9. privateICacheManager<IMemcachedCache>cacheManager;
  10. publicObjectgetObject()throwsException{
  11. returncacheManager;
  12. }
  13. publicClassgetObjectType(){
  14. returnthis.cacheManager.getClass();
  15. }
  16. publicbooleanisSingleton(){
  17. returntrue;
  18. }
  19. publicvoidafterPropertiesSet()throwsException{
  20. logger.info("InitializingMemcachedCacheManager");
  21. cacheManager=CacheUtil.getCacheManager(IMemcachedCache.class,
  22. MemcachedCacheManager.class.getName());
  23. cacheManager.start();
  24. }
  25. publicvoiddestroy()throwsException{
  26. logger.info("ShuttingdownMemcachedCacheManager");
  27. cacheManager.stop();
  28. }
  29. }


配置:

  1. <beanid="memcachedManager"
  2. class="com.framework.extcomponent.cache.MemcachedCacheManagerFactoryBean"/>


resourceCacheBackend负责实际执行缓存操作,put 、get、remove。
代码:

  1. /**
  2. *User:ronghao
  3. *Date:2008-10-14
  4. *Time:10:37:16
  5. *返回MemcachedCache
  6. */
  7. publicclassMemcachedCacheFactoryBeanimplementsFactoryBean,BeanNameAware,InitializingBean{
  8. protectedfinalLoglogger=LogFactory.getLog(getClass());
  9. privateICacheManager<IMemcachedCache>cacheManager;
  10. privateStringcacheName;
  11. privateStringbeanName;
  12. privateIMemcachedCachecache;
  13. publicvoidsetCacheManager(ICacheManager<IMemcachedCache>cacheManager){
  14. this.cacheManager=cacheManager;
  15. }
  16. publicvoidsetCacheName(StringcacheName){
  17. this.cacheName=cacheName;
  18. }
  19. publicObjectgetObject()throwsException{
  20. returncache;
  21. }
  22. publicClassgetObjectType(){
  23. returnthis.cache.getClass();
  24. }
  25. publicbooleanisSingleton(){
  26. returntrue;
  27. }
  28. publicvoidsetBeanName(Stringname){
  29. this.beanName=name;
  30. }
  31. publicvoidafterPropertiesSet()throwsException{
  32. //Ifnocachenamegiven,usebeannameascachename.
  33. if(this.cacheName==null){
  34. this.cacheName=this.beanName;
  35. }
  36. cache=cacheManager.getCache(cacheName);
  37. }
  38. }


配置:

  1. <beanid="resourceCacheBackend"
  2. class="com.framework.extcomponent.cache.MemcachedCacheFactoryBean">
  3. <propertyname="cacheManager"ref="memcachedManager"/>
  4. <propertyname="cacheName"value="memcache"/>
  5. </bean>


resourceCache同上,替换新的实现类MemcachedBasedResourceCache即可。

二、 Session失效的处理
采用memcached作为httpsession的存储,并不直接保存httpsession对象,自定义SessionMap,SessionMap直接继承HashMap,保存SessionMap。

会话胶粘:未失败转发的情况下没必要在memcached保存的SessionMap和httpsession之间复制来复制去,眉来眼去。

利用memcached计数器保存在线人数。

系统权限采用了acegi,在acegi的拦截器链里配置snaFilter

  1. <beanid="filterChainProxy"
  2. class="org.acegisecurity.util.FilterChainProxy">
  3. <propertyname="filterInvocationDefinitionSource">
  4. <value>
  5. CONVERT_URL_TO_LOWERCASE_BEFORE_COMPARISON
  6. PATTERN_TYPE_APACHE_ANT
  7. /**=snaFilter,httpSessionContextIntegrationFilter,logoutFilter,authenticationProcessingFilter,basicProcessingFilter,securityContextHolderAwareRequestFilter,exceptionTranslationFilter,filterInvocationInterceptor
  8. </value>
  9. </property>
  10. </bean>


注意需要配置在第一个。
snaFilter的职责:
1、 没有HttpSession时,创建HttpSession;
2、 创建Cookie保存HttpSession id;
3、 如果Cookie保存的HttpSession id与当前HttpSession id一致,说明是正常请求;
4、 如果Cookie保存的HttpSession id与当前HttpSession id不一致,说明是失败转发;失败转发的处理:
4.1、根据Cookie保存的HttpSession id从memcached获取SessionMap;
4.2、SessionMap属性复制到当前HttpSession;
4.3、memcached删除SessionMap。
5、 判断当前请求url是否是登出url,是则删除SessionMap,在线人数减1.

代码:

  1. publicvoiddoFilter(ServletRequestservletRequest,ServletResponseservletResponse,
  2. FilterChainfilterChain)throwsIOException,ServletException{
  3. finalHttpServletRequesthrequest=(HttpServletRequest)servletRequest;
  4. finalHttpServletResponsehresponse=(HttpServletResponse)servletResponse;
  5. Stringuri=hrequest.getRequestURI();
  6. logger.debug("开始SNA拦截-----------------"+uri);
  7. HttpSessionhttpSession=hrequest.getSession();
  8. StringsessionId=httpSession.getId();
  9. //如果是登出,则直接干掉sessionMap
  10. if(uri.equals(logoutUrl)){
  11. logger.debug("removesessionmap:"+sessionId);
  12. //在线人数减1
  13. getCache().addOrDecr("userCount",1);
  14. getCache().remove(sessionId);
  15. }else{
  16. Stringcookiesessionid=getSessionIdFromCookie(hrequest,hresponse);
  17. if(!sessionId.equals(cookiesessionid)){
  18. createCookie(sessionId,hresponse);
  19. SessionMapsessionMap=getSessionMap(cookiesessionid);
  20. if(sessionMap!=null){
  21. logger.debug("failover--------sessionid:"+sessionId+"cookiesessionid:"+cookiesessionid);
  22. initialHttpSession(sessionMap,httpSession);
  23. cache.remove(cookiesessionid);
  24. }
  25. }
  26. }
  27. filterChain.doFilter(hrequest,hresponse);
  28. }



利用HttpSessionAttributeListener监听httpsession的属性变化,同步到memecached中的sessionmap。

  1. publicvoidattributeAdded(HttpSessionBindingEventevent){
  2. HttpSessionhttpSession=event.getSession();
  3. StringattrName=event.getName();
  4. ObjectattrValue=event.getValue();
  5. StringsessionId=httpSession.getId();
  6. logger.debug("attributeAddedsessionId:"+sessionId+"name:"+attrName+",value:"+attrValue);
  7. SessionMapsessionMap=getSessionMap(sessionId);
  8. if(sessionMap==null){
  9. //在线人数加1
  10. getCache().addOrIncr("userCount",1);
  11. sessionMap=newSessionMap();
  12. }
  13. logger.debug("name:"+attrName+",value:"+attrValue);
  14. sessionMap.put(attrName,attrValue);
  15. getCache().put(sessionId,sessionMap);
  16. }
  17. publicvoidattributeRemoved(HttpSessionBindingEventevent){
  18. HttpSessionhttpSession=event.getSession();
  19. StringattrName=event.getName();
  20. StringsessionId=httpSession.getId();
  21. logger.debug("attributeRemovedsessionId:"+sessionId+"name:"+attrName);
  22. SessionMapsessionMap=getSessionMap(sessionId);
  23. if(sessionMap!=null){
  24. logger.debug("remove:"+attrName);
  25. sessionMap.remove(attrName);
  26. getCache().put(sessionId,sessionMap);
  27. }
  28. }
  29. publicvoidattributeReplaced(HttpSessionBindingEventevent){
  30. attributeAdded(event);
  31. }



利用HttpSessionListener,sessionDestroyed事件时根据sessionid删除memcached里的sessionMap(如果存在)。不再担心httpsession的过期问题。

  1. publicvoidsessionDestroyed(HttpSessionEventevent){
  2. HttpSessionhttpSession=event.getSession();
  3. StringsessionId=httpSession.getId();
  4. logger.debug("sessionRemovedsessionId:"+sessionId);
  5. SessionMapsessionMap=getSessionMap(sessionId);
  6. if(sessionMap!=null){
  7. logger.debug("removesessionmap:"+sessionId);
  8. //在线人数减1
  9. getCache().addOrDecr("userCount",1);
  10. getCache().remove(sessionId);
  11. }
  12. }

三、 文件保存的处理
和缓存类似,采用集中式的文件服务。对于linux,采用nfs。参考文档http://linux.vbird.org/linux_server/0330nfs.php#What_NFS_perm。关键在于对权限的分配。
应用程序本身不用修改。


分享到:
评论

相关推荐

    基于memcached的云缓存ARCUS.zip

    Arcus 是一个基于 memcached 的云缓存,由 NAVER Corp 公司开发。 arcus-memcached 经过大幅度的修改,可以支持 NAVER 的功能和性能要求。Arcus 支持多种数据机构 (List, Set, B tree),除了支持基本的memcached ...

    基于Memcached的分布式Session共享插件设计源码

    该插件是一款基于Memcached的分布式Session共享解决方案源码,由21个文件组成,涵盖Java源代码、XML配置、项目结构等。支持Tomcat6及以上版本,旨在实现应用服务器集群间的Session共享,提高系统在分布式环境下的...

    C#使用memCached实现缓存

    C#使用memCached实现缓存 Memcached 是一个高性能的分布式内存对象缓存系统,用于动态Web应用以减轻数据库负载。它通过在内存中缓存数据和对象来减少读取数据库的次数,从而提供动态、数据库驱动网站的速度。...

    Tomcat基于memcached的session保持-nginx反代

    ### Tomcat 基于 Memcached 的 Session 保持与 Nginx 反向代理实现 在分布式系统中,为了提高应用的可用性和扩展性,通常会采用多台服务器集群部署的方式来提供服务。对于 Java Web 应用而言,Tomcat 是一个常见的...

    Memcached相关程序

    - Memcached通过将数据存储在内存中,实现了快速的数据检索,因为它避免了磁盘I/O操作。 2. **.NET 3.5中的Memcached支持**: - 在.NET环境中,我们可以使用各种库来与Memcached交互,如EnyimMemcached或...

    基于memcached client for java的cache封装

    本主题将深入探讨如何基于Java客户端对Memcached进行封装,以便更高效地在Java应用中使用它。 首先,我们需要理解Java中的Memcached客户端库,如spymemcached或xmemcached。这两个库都提供了与Memcached服务器通信...

    tomcat中Nginx+memcached实现session共享

    为了实现这一目标,我们可以结合Nginx反向代理服务器和memcached内存缓存系统来达到高效、可靠的Session共享。以下是对这个主题的详细阐述: 首先,让我们理解Session的概念。Session是Web应用程序用来跟踪用户状态...

    Nginx+Tomcat+Memcached实现tomcat集群和session共享

    通过以上步骤,我们构建了一个基于Nginx+Tomcat+Memcached的高可用Web服务集群,实现了Session的共享,提高了系统的扩展性和稳定性。在实际运营过程中,还需要关注监控、日志、安全等方面,确保系统的健康运行。

    tomcat8+memcached session共享

    1. `spymemcached-2.8.4.jar`:这是一个基于Java的Memcached客户端库,用于连接和操作Memcached服务器,处理session的存取操作。 2. `memcached-session-manager-1.8.3.jar`:这个库提供了session管理器,实现了将...

    j2ee项目使用filter和memcached实现session服务器

    在J2EE session管理中,Memcached可以作为集中式的session存储,替代默认的基于cookie或本地服务器内存的session存储方式。 实现步骤如下: 1. **配置Memcached服务器**:首先,你需要安装并运行一个Memcached服务...

    Go-MemcachedGoQueue是一个用Go语言写的基于memcached协议的消息队列

    Memcached Go Queue, 简称mgq, 是一个用Go语言写的,基于memcached协议的消息队列。其父亲mcq是最早应用于weibo的基础消息中间件,有着高性能,解耦的优点,使得其广泛应用于微博

    memcached部署监控培训文档基于java

    公司要求组织一个基于Java的memcached培训,整理了这个文档。里面有4个文件,包括memcached部署,memcached培训,监控工具memcache-top安装和daemontools安装。文档是基于word2013的,打不开的话,右键--属性--解锁

    memcached实现集群的session共享问题

    memcached实现集群的session共享问题,处理集群服务器情况下,memcached的session共享解决方案

    php实现的memcached队列类

    而PHP实现的Memcached队列类则是在这一基础上进行的扩展,它允许开发者创建并管理一个基于Memcached的队列,以支持并发操作和特定的队列策略。 首先,这个类提供了多进程并发写入和读取的能力。这意味着多个PHP进程...

    Memcached实例源码,基于.net的dll以及源码

    这个压缩包包含了基于.NET的Memcached实例源码和DLL,以及相关的PPT介绍,是学习和理解Memcached在.NET环境下的应用的宝贵资源。 首先,我们来详细了解一下Memcached的基本概念。Memcached是一个简单的键值存储系统...

    session共享 memcached-session-manager 1.9.6 jar

    `memcached-session-manager`是Java的一个库,用于在基于Tomcat的Web应用中实现基于Memcached的session共享,这在分布式环境中尤为重要。 标题中的"session共享 memcached-session-manager 1.9.6 jar"指的正是这个...

    memcached实现多个tomcat 共享一个session

    3. **修改web.xml配置**:在应用的web.xml中,配置session的管理器,使其使用memcached客户端,而不是默认的基于内存的session管理器。这通常涉及到设置session存储策略和相关参数。 4. **处理序列化与反序列化**:...

    基于memcached的Java Web应用session共享设计源码

    该项目为Java Web应用中的session共享设计,采用memcached作为后端存储,源码包含21个文件,涵盖10个Java类、5个XML配置文件、2个属性文件、1个Git忽略文件、1个LICENSE文件、1个Markdown文档和1个JSP页面。

    Memcached 分布式缓存实现原理简介

    Memcached的一个重要特性是其基于内存的存储方式,这使得数据读取速度非常快。 Memcached的分布式实现并不依赖于服务器之间的通信,而是依赖于客户端的算法。其中,最常用的分布式策略是“余数计算分散法”。客户端...

Global site tag (gtag.js) - Google Analytics