`
kenby
  • 浏览: 725396 次
  • 性别: Icon_minigender_1
  • 来自: 北京
社区版块
存档分类
最新评论

Memcached内存管理机制

 
阅读更多

Slab 分配机制

 

Memcached 不是把所有大小的数据都放在一起的,而是预先分配一系列的 slab,每个

slab 负责一定范围内的数据存储。

初始时,Memcached 为每一个 slab 分配 一个Page(1M) 的内存, slab内再把page切分

成一个一个 Chunk, 组成 Chunk数组,每个Chunk 的大小等于该 slab 的数据存储范围

的最大值。

 

 

缓存记录的原理

memcached 根据记录的大小选择最适合的 slab, 从该 slab 中找一个空闲 chunk, 将数据缓存其中。

 

 

Slab 分配机制的缺点

由于 slab 内的 Chunk 大小是固定的,所以无法有效利用内存。例如将 100 字节的记录缓存到

128 字节的 chunk, 就有 28 字节的内存浪费。

 

Slab的内存分配

memcached 启动时通过 -m 参数指定最大使用内存, 不过这个最大内存不会一次性分配。

而是随着使用不断分配的。缓存一条记录,首先找到合适的 slab, 然后从 slab 中找空闲

chunk,如果没有空闲 chunk,则一次性分配一个 page(1M) 的内存给该 slab,slab

根据 chunk 的大小将 page 进行切分,组成 chunk 数组。如下图,Slab 1 和 Slab 2 都分配

了 1 Page的内存,切分成 chunk 数组。

 

 

总结一下,memcached 内存分配的策略是,slab 按需分配,没有空闲 chunk 就分配,每次分配 1个 page。

另外,memcached 分配出去的内存不会回收,不会释放,slab 的空闲 chunk 不会借给其他 slab 使用。

 

 

  • 大小: 33.9 KB
  • 大小: 15.4 KB
  • 大小: 9.2 KB
  • 大小: 38.8 KB
分享到:
评论

相关推荐

    计算机后端-PHP视频教程. Memcached12 memcached内存管理机制.wmv

    计算机后端-PHP视频教程. Memcached12 memcached内存管理机制.wmv

    Memcached内存分配与SLAB机制

    SLAB机制是Memcached内存管理的关键组成部分,它通过一种特殊的缓存机制来存储item数据。这种机制能够有效地提高内存利用率并减少内存碎片,从而提高系统的整体性能。 **SLAB机制概述:** - **SLAB(Class)定义**...

    29道memcached面试题含答案(很全)

    6. Memcached内存管理机制原理: - Slab Allocation:内存被划分为多个大小固定的块(slabs),每个slab包含多个chunk(数据存储单元)。同一slab的chunk大小相同,避免了内存碎片,简化了内存分配与释放。 ...

    Memcached 内存分析、调优、集群

    - **内置内存管理机制**:包括slab和LRU算法。 许多知名的互联网公司都在使用Memcached,如LiveJournal、Facebook、mixi、Digg、Wikipedia等。例如,Facebook使用了超过200台Memcached服务器,每台配置有16GB的四核...

    Memcached内存分析、调优、集群

    ### Memcached内存分析、调优、集群:深入理解与实践 #### 1. Memcached背景与概述 Memcached是一款高性能的分布式内存缓存服务器,它最初由LiveJournal的运营人员开发,现已成为开源社区中不可或缺的一部分。其...

    Memcached、Redis、MySQL存储层面试问题

    4. 简述Memcached内存管理机制原理? Memcached使用slab allocation机制来管理内存,每个slab分配一个固定的内存大小,用于存储对象。 5. Memcached是怎么工作的? Memcached服务器可以接受客户端的请求,检查缓存...

    Memcache 面试题 23道.pdf

    Memcached 内存管理机制原理: 早期的 Memcached 内存管理方式是通过 malloc 的分配的内存,使用完后通过 free 来回收内存,这种方式容易产生内存碎片,并降低操作系统对内存的管理效率。为了解决这个问题,Slab ...

    memcached面试26题和答案

    #### Memcached内存管理机制 - **早期机制**: 基于malloc/free的内存管理,可能导致内存碎片问题。 - **改进方案**: 引入Slab Allocation机制。 - **Slab Allocation**: 将内存分割成多个固定大小的“slab class”...

    寻找我们丢失的数据

    ### 寻找我们丢失的数据——深入理解Memcached内存管理机制 #### 一、故事的开始 在日常工作中,经常会遇到由于各种原因导致的数据丢失问题。本文将以一个具体案例出发,探讨如何有效地解决这类问题,特别是在使用...

    Memcached内存分配与SLAB机制[借鉴].pdf

    总的来说,Memcached的SLAB机制是其高效运行的关键,它通过精细的内存管理,确保了在高并发场景下的快速响应和低延迟。理解和掌握这一机制对于优化Memcached的性能以及在实际应用中合理配置参数至关重要。

    Memcached内存分析、调优、集群.ppt

    在内存管理方面,Memcached采用了slab分配器机制。Slab是一种预分配内存的策略,将内存分为多个大小固定的块,称为slabs。每个slab由多个page组成,每个page又包含若干个item。这种设计减少了内存碎片,提高了内存...

    memcached的内存分配代码

    在Memcached中,内存管理是至关重要的,因为它直接影响到服务的性能和效率。memcached采用了一种特殊的内存分配策略,名为Slab Allocation,以避免频繁的内存碎片和提高内存利用率。 1. Slab Allocation原理: ...

    Memcached内存分析、调优、集群.pdf

    ### Memcached内存分析、调优、集群 #### 一、Memcached背景介绍 Memcached是一款高性能的分布式内存对象缓存系统,它通过减轻数据库负担来加速动态Web应用程序的速度。最初由LiveJournal的开发者Brad Fitzpatrick...

    PHP内存缓存技术memcached 的安装和工作原理介绍

    4. **内存管理**:memcached管理内存空间,当内存不足时,会使用LRU(Least Recently Used)策略自动删除最近最少使用的数据。 5. **非持久化存储**:由于数据存储在内存中,一旦服务器重启,所有数据将丢失。因此,...

    Java面试题之面试被问到Java组件实现原理时,该可以从哪些角度回答

    通过对Memcached内存管理机制Slab Allocator的理解,可以分析出是因为内存分配策略导致的高剔除率。这表明,了解组件的实现原理能够帮助定位和解决实际问题,避免盲目优化。 总结起来,面试官询问组件实现原理并非...

    ydx_slab_util:实现一个内存池,内存管理机制借鉴memcached,使用一系列链表管理不同大小的内存区块

    ydx_slab_util实现一个内存池,内存管理机制借鉴memcached,使用一系列链表管理不同大小的内存区块。memcached一次分配(默认64M)固定大小的内存区域,使用完毕后使用LRU淘汰最早不使用的内存段。作为一个通用内存池...

    Memcached存储机制 测试

    总结,Memcached以其高效的内存管理和快速的键值操作,成为许多高并发场景下的首选缓存解决方案。通过理解其存储机制,我们可以更好地利用它来优化我们的应用程序,提高服务性能。在实际应用中,根据业务需求,还...

    Memcached缓存机制 用好Cache,优化应用

    **Memcached缓存机制详解与应用优化** Memcached是一款高性能、分布式的内存对象缓存系统,主要用于加速Web应用程序,通过将数据存储在内存中,减少对数据库的直接访问,从而提高系统的响应速度和效率。Memcached的...

Global site tag (gtag.js) - Google Analytics