`
kavy
  • 浏览: 890588 次
  • 性别: Icon_minigender_1
  • 来自: 上海
社区版块
存档分类
最新评论

ehcache集群配置

 
阅读更多
一.集群配置方式

ehcache提供三种网络连接策略来实现集群,rmi,jgroup还有jms。这里只说rmi方式。同时ehcache可以可以实现多播的方式实现集群。也可以手动指定集群主机序列实现集群,本例应用手动指定。

这里说点题外话,本来看着分发包中的原来的例子配置是一件不怎么难的事情,应该很容易就能实现。但是一开始,我是在我的linux主机上和我的主操作系统 windows上实现集群配置。结果反过来弄过去,都没有成功。然后在网上找一些别人的配置经验,竟然都是配置片段,没有完整的实例文件。结果配置半天没成功。但我怀疑是我的linux系统有些地方可能没有配置好,于是先不管他。有开启了我的另一个windows主机。然后把程序部署上去,竟然一次试验成功。高兴的同时,我得发句话“不要把代码片段称作实例,这很不负责任”。同时还存在一个问题,在linux下没有部署成功的原因有待查明。

具体说明:配置cacheManagerPeerListenerFactory是配宿主主机配置监听程序,来发现其他主机发来的同步请求

配置cacheManagerPeerProviderFactory是指定除自身之外的网络群体中其他提供同步的主机列表,用“|”分开不同的主机。

下面的例子的测试过程是:主机B缓存开启,并从名为UserCache的缓存中循环抓取键值为“key1”的元素,直到取到,才退出循环。主机A缓存启动,并在名为UserCache的缓存中放入键值为“key1”的元素。显然,如果主机B取到的元素,那么就证明同步成功,也就是集群成功。

所以在测试过程中先启动主机B的测试程序,在启动主机A的测试程序。

下面具体说配置文件以及测试程序:

1. 主机A的配置文件以及测试源代码

config/ehcache_cluster.xml

XML/HTML代码
<ehcache xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"      
    xsi:noNamespaceSchemaLocation="ehcache.xsd">      
    <cacheManagerPeerProviderFactory      
        class="net.sf.ehcache.distribution.RMICacheManagerPeerProviderFactory"      
        properties="peerDiscovery=manual,        
        rmiUrls=//192.168.1.254:40000/UserCache" />      
      
    <cacheManagerPeerListenerFactory      
        class="net.sf.ehcache.distribution.RMICacheManagerPeerListenerFactory"      
        properties="hostName=192.168.1.126,port=40000,socketTimeoutMillis=120000" />      
      
    <defaultCache maxElementsInMemory="10000" eternal="false"      
        timeToIdleSeconds="120" timeToLiveSeconds="120" overflowToDisk="true"      
        diskSpoolBufferSizeMB="30" maxElementsOnDisk="10000000"      
        diskPersistent="false" diskExpiryThreadIntervalSeconds="120"      
        memoryStoreEvictionPolicy="LRU">      
        <cacheEventListenerFactory      
            class="net.sf.ehcache.distribution.RMICacheReplicatorFactory" />      
    </defaultCache>      
      
    <cache name="UserCache" maxElementsInMemory="1000" eternal="false"      
        timeToIdleSeconds="100000" timeToLiveSeconds="100000"      
        overflowToDisk="false">      
        <cacheEventListenerFactory      
            class="net.sf.ehcache.distribution.RMICacheReplicatorFactory" />      
    </cache>      
</ehcache>    
tutorial/UsingCacheCluster

Java代码
package tutorial;       
      
import java.net.URL;       
      
import net.sf.ehcache.Cache;       
import net.sf.ehcache.CacheManager;       
import net.sf.ehcache.Element;       
      
public class UsingCacheCluster {       
      
    public static void main(String[] args) throws Exception {       
        URL url = UsingCacheCluster.class.getClassLoader().getResource(       
                "config/ehcache_cluster.xml");       
        CacheManager manager = new CacheManager(url);       
        //取得Cache       
        Cache cache = manager.getCache("UserCache");       
        Element element = new Element("key1", "value1");       
        cache.put(element);       
      
        Element element1 = cache.get("key1");       
        System.out.println(element1.getValue());       
    }       
      
}     
2.  主机B上的配置文件以及测试代码

config/ehcache_cluster.xml

XML/HTML代码
<ehcache xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"      
    xsi:noNamespaceSchemaLocation="ehcache.xsd">      
    <cacheManagerPeerProviderFactory      
        class="net.sf.ehcache.distribution.RMICacheManagerPeerProviderFactory"      
        properties="peerDiscovery=manual,        
        rmiUrls=//192.168.1.126:40000/UserCache" />      
      
    <cacheManagerPeerListenerFactory      
        class="net.sf.ehcache.distribution.RMICacheManagerPeerListenerFactory"      
        properties="hostName=192.168.1.254,port=40000, socketTimeoutMillis=120000" />      
      
    <defaultCache maxElementsInMemory="10000" eternal="false"      
        timeToIdleSeconds="120" timeToLiveSeconds="120" overflowToDisk="true"      
        diskSpoolBufferSizeMB="30" maxElementsOnDisk="10000000"      
        diskPersistent="false" diskExpiryThreadIntervalSeconds="120"      
        memoryStoreEvictionPolicy="LRU">      
        <cacheEventListenerFactory      
            class="net.sf.ehcache.distribution.RMICacheReplicatorFactory" />      
    </defaultCache>      
      
    <cache name="UserCache" maxElementsInMemory="1000" eternal="false"      
        timeToIdleSeconds="100000" timeToLiveSeconds="100000"      
        overflowToDisk="false">      
        <cacheEventListenerFactory      
            class="net.sf.ehcache.distribution.RMICacheReplicatorFactory" />      
    </cache>      
</ehcache>    
tutorial/UsingCacheCluster

Java代码
package tutorial;       
      
import java.net.URL;       
      
import net.sf.ehcache.Cache;       
import net.sf.ehcache.CacheManager;       
import net.sf.ehcache.Element;       
      
public class UsingCacheCluster {       
      
    public static void main(String[] args) throws Exception {       
        URL url = UsingCacheCluster.class.getClassLoader().getResource(       
                "config/ehcache_cluster.xml");       
        CacheManager manager = new CacheManager(url);       
        //取得Cache       
        Cache cache = manager.getCache("UserCache");       
      
        while(true) {       
            Element e = cache.get("key1");       
            if(e != null) {       
                System.out.println(e.getValue());       
                break;       
            }       
            Thread.sleep(1000);       
        }       
    }       
      
}     


毫无疑问,几乎所有的网站的首页都是访问率最高的,而首页上的数据来源又是非常广泛的,大多数来自不同的对象,而且有可能来自不同的db,所以给首页做缓存是一个不错的主意,那么主页的缓存策略是什么样子的呢,我认为应该是某个固定时间之内不变的,比如说2分钟更新一次。那么这个缓存应该做在什么地方呢,让我们来看一下,假设您的应用的结构是

page-filter-action-service-dao-db

,这个过程中的-的地方都是可以做缓存的地方,根据页面缓存的特征,应该把页面缓存做到尽量靠近客户的地方,就是在page和filter之间,这样的优点就是第一个用户请求之后,页面被缓存,第二个用户再来请求的时候,走到filter这个请求就结束了,无需再走后面的action-service-dao-db。带来的好处是服务器压力的减低和客户段页面响应速度的加快。

那么我们来看一下如何使用ehcache做到这一点。

在使用ehcache的页面缓存之前,我们必须要了解ehcache的几个概念,

1 timeToIdleSeconds,多长时间不访问该缓存,那么ehcache就会清除该缓存。

2 timeToLiveSeconds,缓存的存活时间,从开始创建的时间算起。

看到这里,我们知道,首页的页面缓存的存活时间,我们定的是2分钟,那么也就是说我们的timeToLiveSeconds应该设置为120,同时我们的timeToIdleSeconds最好也设置为2分钟,或者大于2分钟。我们来看一下下面这个配置,这个配置片段应该放到ehcache.xml中:



XML/HTML代码
   <cache name="SimplePageCachingFilter"  
           maxElementsInMemory="10"     
           maxElementsOnDisk="10"     
           eternal="false"     
           overflowToDisk="true"  
           diskSpoolBufferSizeMB="20"  
           timeToIdleSeconds="10"    
           timeToLiveSeconds="10"     
           memoryStoreEvictionPolicy="LFU"  
    />  
   SimplePageCachingFilter是缓存的名字,maxElementsInMemory表示内存中SimplePageCachingFilter缓存中元素的最大数量为10,maxElementsOnDisk是指持久化该缓存的元素到硬盘上的最大数量也为10(),eternal=false意味着该缓存会死亡。overflowToDisk=true意思是表示当缓存中元素的数量超过限制时,就把这些元素持久化到硬盘,如果overflowToDisk是false,那么maxElementsOnDisk的设置就没有什么意义了。memoryStoreEvictionPolicy=LFU是指按照缓存的hit值来清除,也就是说缓存满了之后,新的对象需要缓存时,将会将缓存中hit值最小的对象清除出缓存,给新的对象腾出地方来了(文章最后有ehcache中自带的3种缓存清空策略的介绍)。

接着我们来看一下SimplePageCachingFilter的配置,



XML/HTML代码
<filter>     
        <filter-name>indexCacheFilterfilter-name>  
         <filter-class>  
              net.sf.ehcache.constructs.web.filter.SimplePageCachingFilter   
         <filter-class>  
<filter>  
<filter-mapping>  
         <filter-name>indexCacheFilterfilter-name>  
         <url-pattern>*index.actionurl-pattern>  
<filter-mapping>  
  就只需要这么多步骤,我们就可以给某个页面做一个缓存的,把上面这段配置放到你的web.xml中,那么当你打开首页的时候,你会发现,2分钟才会有一堆sql语句出现在控制台上。当然你也可以调成5分钟,总之一切都在控制中。

好了,缓存整个页面看上去是非常的简单,甚至都不需要写一行代码,只需要几行配置就行了,够简单吧,虽然看上去简单,但是事实上内部实现却不简单哦,有兴趣的话,大家可以看看SimplePageCachingFilter继承体系的源代码。

上面的配置针对的情况是缓存首页的全部,如果你只想缓存首页的部分内容时,你需要使用SimplePageFragmentCachingFilter这个filter。我们看一下如下片断:

XML/HTML代码
<filter>     
        <filter-name>indexCacheFilterfilter-name>     
        <filter-class>     
            net.sf.ehcache.constructs.web.filter.SimplePageFragmentCachingFilter     
        <filter-class>     
<filter>  
<filter-mapping>  
        <filter-name>indexCacheFilterfilter-name>  
        <url-pattern>*/index_right.jspurl-pattern>  
<filter-mapping>    
这个jsp需要被jsp:include到其他页面,这样就做到的局部页面的缓存。这一点貌似没有oscache的tag好用。

事实上在cachefilter中还有一个特性,就是gzip,也就是说缓存中的元素是被压缩过的,如果客户浏览器支持压缩的话,filter会直接返回压缩过的流,这样节省了带宽,把解压的工作交给了客户浏览器,如果客户的浏览器不支持gzip,那么filter会把缓存的元素拿出来解压后再返回给客户浏览器(大多数爬虫是不支持gzip的,所以filter也会解压后再返回流),这样做的优点是节省带宽,缺点就是增加了客户浏览器的负担(但是我觉得对当代的计算机而言,这个负担微乎其微)。

好了,如果你的页面正好也需要用到页面缓存,不防可以考虑一下ehcache,因为它实在是非常简单,而且易用。

总结:ehcache是一个非常轻量级的缓存实现,而且从1.2之后就支持了集群,目前的最新版本是1.3,而且是hibernate默认的缓存provider。虽然本文是介绍的是ehcache对页面缓存的支持,但是ehcache的功能远不止如此,当然要使用好缓存,对JEE中缓存的原理,使用范围,适用场景等等都需要有比较深刻的理解,这样才能用好缓存,用对缓存。

最后复习一下ehcache中缓存的3种清空策略:

1 FIFO,first in first out,这个是大家最熟的,先进先出,不多讲了

2 LFU, Less Frequently Used,就是上面例子中使用的策略,直白一点就是讲一直以来最少被使用的。如上面所讲,缓存的元素有一个hit属性,hit值最小的将会被清出缓存。

2 LRU,Least Recently Used,最近最少使用的,缓存的元素有一个时间戳,当缓存容量满了,而又需要腾出地方来缓存新的元素的时候,那么现有缓存元素中时间戳离当前时间最远的元素将被清出缓存。



分享到:
评论

相关推荐

    EHCACHE集群配置-JGroup篇

    EHCAHCE基于JGROUP的集群配置方案,内含相关配置文件,及配置说明

    Ehcache集群实例

    4. **Ehcache集群配置**:要设置Ehcache集群,首先需要配置`ehcache.xml`或使用代码配置。在配置中,需要指定集群使用的通信机制,例如JGroups配置文件。JGroups配置文件定义了集群的网络拓扑、传输协议、心跳策略等...

    ehcache集群同步配

    ehcache集群同步配置实例加说明文档

    ehcache使用,以及集群配置

    **Ehcache 使用详解与集群配置** Ehcache 是一个广泛使用的开源Java缓存系统,它提供了内存和磁盘存储,以及对缓存数据的分布式处理能力。在Java应用程序中,Ehcache能够显著提高性能,减少数据库负载,通过缓存...

    Ehcache远程复制

    描述部分提到的“Ehcache集群配置手册帮助你梳理Ehcache集群部署的配置”,意味着本手册旨在为开发者提供一个详细的指南,指导如何通过远程复制技术配置Ehcache集群,以实现缓存数据的一致性和同步。在分布式系统中...

    ehcache集群方案

    它提供本地内存缓存,并且可以通过集群配置实现分布式缓存,使得多个节点间可以共享数据。集群方案在高并发、大数据量场景下尤其重要,因为它能提供更高的可用性和可扩展性。 在Ehcache集群方案中,一个关键组件是...

    Ehcache集群环境配置

    ### Ehcache集群环境配置 #### 一、Ehcache简介 Ehcache 是一款开源的高性能 Java 缓存框架,广泛应用于 Java 应用程序中,以提高应用程序性能。其核心设计采用三层类层次结构,主要包括 CacheManager、Cache 和 ...

    Ehcache集群使用

    它支持本地缓存、分布式缓存以及集群配置,使得多台服务器之间可以共享缓存数据,从而实现高可用性和可扩展性。在本文中,我们将深入探讨如何在实际项目中配置和使用 Ehcache 集群。 首先,我们需要理解 Ehcache ...

    ehcache集群缓存配置

    ehcache提供三种网络连接策略来实现集群,rmi,jgroup还有jms。这里只说rmi方式。同时ehcache可以可以实现多播的方式实现集群。也可以手动指定集群主机序列实现集群,本例应用手动指定。

    Spring Boot 2.x基础教程:使用EhCache缓存集群.docx

    为了解决这个问题,我们需要配置EhCache缓存集群,以确保数据更新能在各个进程中同步。以下是如何使用EhCache实现缓存集群的详细步骤: 首先,确保缓存对象是可序列化的。在上述例子中,`User`实体需要实现`...

    ehcache集群

    1. **负载均衡**:Ehcache集群可以将数据分布在多个节点上,从而将负载分散到各个服务器,降低单个节点的压力。 2. **高可用性**:如果一个节点失效,其他节点仍然可以提供服务,确保系统连续运行。 3. **数据冗余**...

    EhCache-Cluster-Tester.zip_cluster_cluster html网页_ehcache_java

    在“EhCache-Cluster-Tester.zip”这个压缩包中,包含了一个关于EhCache集群配置和测试的实例,这对于理解如何在分布式环境中使用EhCache至关重要。 EhCache的集群功能允许多个节点共享同一份缓存数据,实现高可用...

    Ehcache通过Jgroups做集群

    在Ehcache通过Jgroups进行集群配置时,首先需要理解Jgroups的配置文件——`jgroups.xml`。这个文件定义了集群中节点如何相互发现、通信以及故障检测的规则。配置文件中的关键元素包括: 1. **Transport**: 定义了...

    EHcache缓存框架

    **EHcache集群配置** 1. **分布式缓存**:在集群环境中,EHcache支持分布式缓存,意味着多个节点可以共享同一份缓存数据,提高可用性和数据一致性。 2. **Replication(复制)**:当一个节点中的缓存项更新时,该...

    集群环境中使用_EhCache_缓存系统&Ehcache配置文件的详细说明

    2. 节点发现机制:确保所有节点都能正确发现并加入到集群中,通常通过配置 Terracotta 的集群配置文件实现。 3. 网络稳定性:分布式缓存对网络依赖性强,保持网络稳定至关重要。 总结,EhCache在集群环境中的应用...

    民政部金民工程统一开发框架功能点.pdf

    4. Ehcache集群配置 在分布式系统中,Ehcache可以配置为集群模式,以提高系统的可用性和可扩展性。在集群模式下,Ehcache可以将缓存数据分布在多个节点上,提供高可用性和可扩展性的缓存解决方案。 5. Zookeeper在...

    ehcache rmi集群demo

    在这个“ehcache rmi集群demo”中,我们将探讨如何将Ehcache与RMI结合,实现一个跨节点的缓存集群。 首先,Ehcache的核心概念包括缓存管理器(Cache Manager)、缓存(Cache)、缓存项(Cache Entry)等。缓存管理...

    ehcache配置使用详解

    集群配置通常涉及以下步骤: - 定义集群模式,如复制或分区。 - 设置集群通信协议和端口。 - 配置数据一致性策略,如写入策略和故障恢复机制。 - 调整缓存过期策略,以适应网络延迟和节点状态变化。 总之,ehcache...

    EhCache 集群演示程序

    由于 JGroups 的包比较大,有两兆多,因此没有放到这个zip包里,请大家自行下载 JGroups 的jar包...只需要将解压后的 webapp 目录配置到tomcat下做为一个web应用即可进行测试。 测试方法详见 webapp/readme.txt 文件

    Ehcache 3(ehcache-clustered-3.8.1-kit.zip)

    TSA 是一个专门用于Ehcache集群的服务器,它提供了分布式锁服务、数据复制和故障检测等功能。当一个节点更新缓存时,TSA会确保这些更改被传播到集群中的其他节点,从而保持数据一致性。 Ehcache 3 集群支持的主要...

Global site tag (gtag.js) - Google Analytics