`

memcached集群管理-magent

阅读更多

Memcached集群管理-magent

 

 

 

magent是一款开源的memcached代理服务器软件
地址:http://code.google.com/p/memagent/

 

安装magent到/usr/local/下
cd /usr/local
mkdir magent
cd magent/
wget http://memagent.googlecode.com/files/magent-0.5.tar.gz
tar zxvf magent-0.5.tar.gz
/sbin/ldconfig
sed -i "s#LIBS = -levent#LIBS = -levent -lm#g" Makefile
make

 

magent命令参数:
-h this message
-u uid
-g gid
-p port, default is 11211. (0 to disable tcp support)
-s ip:port, set memcached server ip and port
-b ip:port, set backup memcached server ip and port
-l ip, local bind ip address, default is 0.0.0.0
-n number, set max connections, default is 4096
-D don't go to background
-k use ketama key allocation algorithm
-f file, unix socket path to listen on. default is off
-i number, max keep alive connections for one memcached server, default is 20
-v verbose

 

启动magent服务
magent -u root -n 4096 -l 127.0.0.1 -p 12000 -s 127.0.0.1:8086 -s 127.0.0.2:8086 -b 127.0.0.1:11213

 

magent的hash算法
magent采用的是:Consistent Hashing原理,Consistent Hashing如下所示:首先求出memcached服务器(节点)的哈希值, 并将其配置到0~232的圆(continuum)上。 然后用同样的方法求出存储数据的键的哈希值,并映射到圆上。 然后从数据映射到的位置开始顺时针查找,将数据保存到找到的第一个服务器上。 如果超过232仍然找不到服务器,就会保存到第一台memcached服务器上。

从上图的状态中添加一台memcached服务器。余数分布式算法由于保存键的服务器会发生巨大变化 而影响缓存的命中率,但Consistent Hashing中,只有在continuum上增加服务器的地点逆时针方向的 第一台服务器上的键会受到影响。

 

利用magent实现对memecache的分布式管理,搭建一套memcache集群服务
1、前端php对magent的访问跟对memcache访问相同,不需要做任何更改,对于插入的key,magent会把值散列到各个memcache服务上,只操作magent,不用关心后端处理
2、公司项目应用:南北各10台前端,南北各部署一套magent服务,主要是考虑电信网通的跨网访问
以北方为例,每个前端安装memcached服务(大内存机器可以启动多个服务),每个前端都安装magent服务,后端挂载全部机器的memcached服务,启动参数:magent -p 12000 -s 127.0.0.1:8086 -s 127.0.0.2:8086 -s 127.0.0.3:8086.......-s 127.0.0.10:8086,所有前端配置都是相同的,任何一个前端只需访问本地端口的magent,这样的memcache集群对应用带来很大便利.
比如项目的基本配置信息,早期策略只能在中控机生成配置文件,同步到各个前端,没有办法把配置信息放到缓存中,因为各个前端的memcache是不共享的,一台机器缓存更新,其它机器是不更新的,用程序去控制更新,还是存在不稳定因素,而且随着服务增多,也不便于管理,部署了magent后,就可以解决这个问题,任何一个前端更新数据=全局更新
这种部署还可以解决的应用:session共享

项目中多处已经实际应用,magent对memcache的均衡和稳定性都非常不错,推荐使用

 

<!-- google_ad_section_end -->http://www.linuxso.com/architecture/33852.html
<script></script>

分享到:
评论

相关推荐

    memcached-1.5.9

    Magent通常是指Magent,一个用于管理memcached集群的工具,能够帮助监控和调整memcached实例的性能。 **memcached详解** 1. **工作原理**:Memcached基于键值对存储,将数据存储在内存中,通过TCP或UDP协议提供...

    memcached-1.4.22.tar.gz,magent6,memadmin

    memadmin可能是另一个memcached的管理工具,通常这类工具提供图形化界面,方便用户更直观地管理和监控memcached集群。memadmin-master.zip可能是这个工具的源码包,可能需要解压后编译安装,然后通过Web界面进行操作...

    Memcached 服务器集群安装配置和测试

    tar zxvf magent-0.5.tar.gz sed -i "s#LIBS = -levent#LIBS = -levent -lm#g" Makefile make cp magent /usr/bin/magent cd .. ``` 二、配置防火墙 在所有安装 Memcached 的节点服务器上,需要打开防火墙的对外...

    magent-0.6.tar.gz

    综合以上信息,我们可以推测 magent-0.6 是一个专为 Memcached 设计的集群管理工具,它利用 Ketama 算法实现数据的均衡分布,并且解决了 Memcached 单点故障问题,提供了一种高可用的解决方案。它的源代码是开源的,...

    libevent+memc+magent+repacached.zip

    标题中的"libevent+memcached+magent+repacached.zip"是一个组合了多个软件和工具的压缩包,用于搭建一个基于Memcached的集群环境。这个压缩包包含了以下关键组件: 1. **Libevent**:这是一个事件通知库,主要用于...

    Java开发中的Memcache原理及实现

    - **定义**:一款开源的Memcached代理服务器软件,用于构建高可用性的集群应用。 - **作用**:通过代理的方式提高Memcached的稳定性和性能。 - **获取方式**:访问其项目网站 (http://code.google.com/p/memagent/) ...

    Memcache原理及实现

    - Magent代理:Magent是一个开源的Memcached代理,可以提高Memcached集群的可用性和性能。 - 客户端库:对于Java开发,常用的客户端库是memcached client for java(也称为spymemcached),它提供方便的API接口,...

    memcache集群安装

    安装magent(如文件`magent-0.6.tar.gz`所示),然后配置它作为客户端与多个memcache服务器之间的中间层。 ### 8. memcached升级 在文件`memcached-1.4.15.tar.gz`中,你可以找到memcached的源代码,用于安装较新...

    Memcached Redis MongoDB对比

    Memcached的内存管理相对灵活,可以通过工具如magent构建集群,增加可用内存。MongoDB适合存储大量数据,但是其对内存的需求较大,建议单独为其分配资源。 可用性(单点问题): Redis通过客户端实现分布式读写,...

    session共享tomcat7 memcached 文档

    - **Non-Sticky Mode**:在这种模式下,客户端的请求可以在集群中的任意一台服务器上被处理,这就需要通过Memcached或其他中央存储来同步Session数据。 #### 四、项目环境与实施步骤 在实际部署过程中,需要完成...

    非关系数据库对比分析

    通过 Memcached 代理软件 Magent 可以构建内存集群,如一个由 10 台 4GB 内存服务器组成的集群总共可以提供 40GB 的可用内存。 3. **MongoDB**:适合大规模数据存储,依赖操作系统虚拟内存(VM)进行内存管理。为了...

    Java开发中的Memcache原理及实现(带书签)

    Magent是一个开源的Memcached代理服务器软件,可以用来建立和管理缓存,能够支持高可用性的集群应用。Memcached客户端程序,推荐使用memcachedclientforjava,这是因为它提供了Java开发者常用的API,方便与Java应用...

    京东面试问题

    - **Memcached** 通常需要借助第三方工具如 Magent 来实现集群功能。 **4. 安全性和灾难恢复** - **Redis** 通过持久化机制支持数据备份,即使在服务器故障时也能通过 RDB 或 AOF 文件恢复数据。 - **Memcached** ...

    面试题redis面试题集合.pdf

    4. 分布式:虽然两者都可以通过客户端或者代理支持分布式的实现,但Redis自身从3.0版本开始支持多播方式的集群功能,而Memcached需要依赖其他组件如Magent来实现集群。 5. 使用场景:由于Redis提供了更多的功能和...

    redis 问题.pdf

    2. 分布式:两者都可以实现集群,但Memcached通常采用magent进行一主多从配置,Redis则有自己原生的集群解决方案。 3. 持久化:Redis可以将数据定期保存到磁盘,支持AOF(Append Only File)和RDB(Snapshotting)两...

Global site tag (gtag.js) - Google Analytics