`

Memcache工作原理

 
阅读更多

1       Memcache是什么
Memcache是danga.com的一个项目,最早是为 LiveJournal 服务的,目前全世界不少人使用这个缓存项目来构建自己大负载的网站,来分担数据库的压力。
它可以应对任意多个连接,使用非阻塞的网络IO。由于它的工作机制是在内存中开辟一块空间,然后建立一个HashTable,Memcached自管理这些HashTable。
  
为什么会有Memcache和memcached两种名称?
其实Memcache是这个项目的名称,而memcached是它服务器端的主程序文件名,
   
Memcache官方网站:http://www.danga.com/memcached,
2       Memcache工作原理
首先 memcached 是以守护程序方式运行于一个或多个服务器中,随时接受客户端的连接操作,客户端可以由各种语言编写,目前已知的客户端 API 包括 Perl/PHP/Python/Ruby/Java/C#/C 等等。客户端在与 memcached 服务建立连接之后,接下来的事情就是存取对象了,每个被存取的对象都有一个唯一的标识符 key,存取操作均通过这个 key 进行,保存到 memcached 中的对象实际上是放置内存中的,并不是保存在 cache 文件中的,这也是为什么 memcached 能够如此高效快速的原因。注意,这些对象并不是持久的,服务停止之后,里边的数据就会丢失。
与许多 cache 工具类似,Memcached 的原理并不复杂。它采用了C/S的模式,在 server 端启动服务进程,在启动时可以指定监听的 ip,自己的端口号,所使用的内存大小等几个关键参数。一旦启动,服务就一直处于可用状态。Memcached 的目前版本是通过C实现,采用了单进程,单线程,异步I/O,基于事件 (event_based) 的服务方式.使用 libevent 作为事件通知实现。多个 Server 可以协同工作,但这些 Server 之间是没有任何通讯联系的,每个 Server 只是对自己的数据进行管理。Client 端通过指定 Server 端的 ip 地址(通过域名应该也可以)。需要缓存的对象或数据是以 key->value 对的形式保存在Server端。key 的值通过 hash 进行转换,根据 hash 值把 value 传递到对应的具体的某个 Server 上。当需要获取对象数据时,也根据 key 进行。首先对 key 进行 hash,通过获得的值可以确定它被保存在了哪台 Server 上,然后再向该 Server 发出请求。Client 端只需要知道保存 hash(key) 的值在哪台服务器上就可以了。
        其实说到底,memcache 的工作就是在专门的机器的内存里维护一张巨大的 hash 表,来存储经常被读写的一些数组与文件,从而极大的提高网站的运行效率。

3       如何使用
建立Manager类

 
Java代码
package com.alisoft.sme.memcached; 
 
import java.util.Date; 
 
import com.danga.MemCached.MemCachedClient; 
import com.danga.MemCached.SockIOPool; 
 
public class MemCachedManager { 
 
    // 创建全局的唯一实例 
    protected static MemCachedClient mcc = new MemCachedClient(); 
 
    protected static MemCachedManager memCachedManager = new MemCachedManager(); 
 
    // 设置与缓存服务器的连接池 
    static { 
        // 服务器列表和其权重 
        String[] servers = { "127.0.0.1:11211" }; 
        Integer[] weights = { 3 }; 
 
        // 获取socke连接池的实例对象 
        SockIOPool pool = SockIOPool.getInstance(); 
 
        // 设置服务器信息 
        pool.setServers(servers); 
        pool.setWeights(weights); 
 
        // 设置初始连接数、最小和最大连接数以及最大处理时间 
        pool.setInitConn(5); 
        pool.setMinConn(5); 
        pool.setMaxConn(250); 
        pool.setMaxIdle(1000 * 60 * 60 * 6); 
 
        // 设置主线程的睡眠时间 
        pool.setMaintSleep(30); 
 
        // 设置TCP的参数,连接超时等 
        pool.setNagle(false); 
        pool.setSocketTO(3000); 
        pool.setSocketConnectTO(0); 
 
        // 初始化连接池 
        pool.initialize(); 
 
        // 压缩设置,超过指定大小(单位为K)的数据都会被压缩 
        mcc.setCompressEnable(true); 
        mcc.setCompressThreshold(64 * 1024); 
    } 
 
    /**
     * 保护型构造方法,不允许实例化!
     * 
     */ 
    protected MemCachedManager() { 
 
    } 
 
    /**
     * 获取唯一实例.
     * 
     * @return
     */ 
    public static MemCachedManager getInstance() { 
        return memCachedManager; 
    } 
 
    /**
     * 添加一个指定的值到缓存中.
     * 
     * @param key
     * @param value
     * @return
     */ 
    public boolean add(String key, Object value) { 
        return mcc.add(key, value); 
    } 
 
    public boolean add(String key, Object value, Date expiry) { 
        return mcc.add(key, value, expiry); 
    } 
 
    public boolean replace(String key, Object value) { 
        return mcc.replace(key, value); 
    } 
 
    public boolean replace(String key, Object value, Date expiry) { 
        return mcc.replace(key, value, expiry); 
    } 
 
    /**
     * 根据指定的关键字获取对象.
     * 
     * @param key
     * @return
     */ 
    public Object get(String key) { 
        return mcc.get(key); 
    } 
 
    public static void main(String[] args) { 
        MemCachedManager cache = MemCachedManager.getInstance(); 
        cache.add("hello", 234); 
        System.out.print("get value : " + cache.get("hello")); 
    } 


建立数据对象

Java代码
package com.alisoft.sme.memcached; 
 
import java.io.Serializable; 
 
public class TBean implements Serializable { 
     
    private static final long serialVersionUID = 1945562032261336919L; 
 
    private String name; 
 
    public String getName() { 
        return name; 
    } 
 
    public void setName(String name) { 
        this.name = name; 
    } 

Java代码
<pre name="code" class="java"> </pre> 
 
<h2 style="margin: 13pt 0cm 13pt 28.8pt;"><span style="" lang="EN-US"><span style=""><span style="font-family: 'Times New Roman';">   </span></span></span><span style=""><span style="font-size: large;">创建测试用例</span></span></h2> 
<h2 style="margin: 13pt 0cm 13pt 28.8pt;"> </h2> 
<pre name="code" class="java">package com.alisoft.sme.memcached.test; 
 
import junit.framework.TestCase; 
 
import org.junit.Test; 
 
import com.alisoft.sme.memcached.MemCachedManager; 
import com.alisoft.sme.memcached.TBean; 
 
public class TestMemcached extends TestCase { 
 
    private static MemCachedManager cache; 
 
    @Test 
    public void testCache() { 
         
        TBean tb = new TBean(); 
        tb.setName("E网打进"); 
        cache.add("bean", tb); 
         
        TBean tb1 = (TBean) cache.get("bean"); 
        System.out.println("name=" + tb1.getName()); 
        tb1.setName("E网打进_修改的"); 
         
        tb1 = (TBean) cache.get("bean"); 
        System.out.println("name=" + tb1.getName()); 
    } 
 
    @Override 
    protected void setUp() throws Exception { 
        super.setUp(); 
        cache = MemCachedManager.getInstance(); 
    } 
 
    @Override 
    protected void tearDown() throws Exception { 
        super.tearDown(); 
        cache = null; 
    } 
 

</pre> 
<h2 style="margin: 13pt 0cm 13pt 28.8pt;"> <span style="">测试结果</span></h2> 
<h2 style="margin: 13pt 0cm 13pt 28.8pt;"><span style=""> 
<pre name="code" class="java">[INFO] ++++ serializing for key: bean for class: com.alisoft.sme.memcached.TBean 
[INFO] ++++ memcache cmd (result code): add bean 8 0 93 (NOT_STORED) 
[INFO] ++++ data not stored in cache for key: bean 
[INFO] ++++ deserializing class com.alisoft.sme.memcached.TBean 
name=E网打进 
[INFO] ++++ deserializing class com.alisoft.sme.memcached.TBean 
name=E网打进 
</pre> 
</span></h2> 

示例:暂且参照http://liureying.blog.163.com/blog/static/6151352010949555923/
     等研究透彻后,再分享

分享到:
评论

相关推荐

    memcache 工作原理

    memcache工作原理

    Memcache原理及实现

    【Memcache原理及实现】 Memcache,全称Memcached,是一种高性能的分布式内存对象缓存系统,主要用于减轻数据库的负载。它将数据存储在内存中,以键值对的形式提供快速访问,尤其适用于高并发场景。Memcache最初由...

    Memcache的使用和协议分析详解

    **Memcache工作原理** Memcache基于键值对(key-value)存储模型,数据以二进制格式存储。当应用程序需要数据时,首先尝试从Memcache中获取,如果存在则返回,否则从数据库中读取并将结果存入Memcache,以备后续...

    缓存框架-Memcache的例子

    在本文中,我们将深入探讨Memcache的工作原理、优势以及如何在实际项目中使用它。 一、Memcache简介 Memcache是由Danga Interactive开发的一个高性能、分布式内存对象缓存系统,适用于动态Web应用以减轻数据库负载...

    Java开发中的Memcache原理及实现

    下面将详细介绍Memcached的工作原理以及在Java开发中的具体实现。 1. Memcached的工作原理: - 分布式存储:Memcached采用分散式哈希(Distributed Hash Table,DHT)策略,将数据根据键(key)均匀地分布到各个...

    高洛峰 memcache for window 和linux版软件及教程

    二、Memcache工作原理 Memcache 软件, memcached http httpd vsftp vsftpd c/s软件 memcached是以守护程序方式运行于一个或多个服务器中,随时会接收客户端的连接和操作。 客户端使用各种语言去编写 ...

    详解memcache

    #### memcache工作原理 - **架构**: memcached采用客户端/服务器(C/S)架构。服务器端作为一个守护进程运行,随时接受客户端的连接请求。客户端可以由多种编程语言编写,例如Perl、PHP、Python、Ruby、Java、C#和C...

    【汇总】Memcache

    在本文中,我们将深入探讨Memcache的核心原理、功能、使用场景以及常见操作。 ### 一、Memcache简介 Memcache最初由Danga Interactive公司开发,现已成为开源项目,被许多大型网站如Facebook、Twitter等采用。它的...

    Memcache 基础教程(php 缓存)

    Memcache工作原理是通过在内存中开辟一块空间,并使用一种称为HashTable的数据结构来存储键值对。键用于定位存储在缓存中的数据,而值则是要缓存的数据本身。Memcached作为项目的服务器端程序,负责管理这些...

    MemCache开发说明文档

    这部分会详细介绍MemCache的基本概念、工作原理及其在高流量网站中解决性能问题的关键作用。 **第 4 章 技术预研目标** 4.1 设定预研的具体目标,例如熟悉MemCache的架构、安装过程、客户端开发以及优化策略等。 *...

    MemCache对象缓存应用

    总之,“MemCache对象缓存应用”这个主题涵盖的内容广泛,包括 MemCache的基本概念、工作原理、应用场景、源码解析以及工具使用等,对于理解和优化Web应用性能具有重要意义。通过深入学习,开发者可以更有效地利用...

    memcache win7 64位 安装文件

    首先,我们要理解`memcache`的工作原理。它是一个基于内存的键值存储服务,不持久化数据,因此适用于存储非关键性的临时数据。当Web应用程序需要访问数据时,会首先查找缓存中的数据,如果找到则直接返回,无需查询...

    memcache 5.3.3

    1. **工作原理** Memcache 采用键值对(Key-Value)存储模式,用户可以将任意字符串(key)与任意类型的数据(value)关联。当应用程序需要数据时,首先尝试从 Memcache 中查找,如果找到则直接返回,否则才去...

    Java开发中的Memcache原理及实现(带书签)

    安装好Memcache之后,在Java应用中实现Memcache原理及实现,通常需要进行如下步骤: 1. 引入Memcached客户端库到Java项目中。常见的客户端库包括memcachedclientforjava。 2. 初始化客户端连接。客户端连接到...

    服务器缓存服务memcache

    下面将详细阐述Memcache的主要特点、工作原理、安装与配置、使用方法以及其在实际应用中的优势。 1. **Memcache的特点:** - **高性能**:Memcache是为速度而设计的,它可以快速地存储和检索数据,因为它直接在...

    Memcache 1.2.6 for Windows

    1. **工作原理**:Memcache基于键值对(key-value)存储,将数据存储在内存中,避免了传统数据库的磁盘I/O操作,从而大大提高了数据读取速度。当请求到达时,首先检查数据是否存在于缓存中,如果存在,则直接返回,...

Global site tag (gtag.js) - Google Analytics