`

内存分配算法

阅读更多
一、Buddy算法
 
 

DMA(Direct Memory Access,直接内存存取)、常规、高端内存这3个区域都采用buddy算法进行管理,把空闲的页以2的n次方为单位进行管理,因此Linux最底层的内存申请都是以2n 为单位的。Buddy算法最主要的的特点任何时候区域里的空闲内存都能以2的n次方进行拆分或合并。

例如,假设ZONE_NORMAL有16页内存(24),此时有人申请一页内存,Buddy算法会把剩下的15页拆分成8+4+2+1,放到不同的链表中去。此时再申请4页,直接给4页,若再申请4页,则从8页中给4页,正好剩下4页。Buddy算法的精髓在于任何正整数都可以拆分成2的n次方之和。

通过/proc/buddyinfo可以看到内存空闲的一些情况:

 
 

Buddy算法的优点是避免了内存的外部碎片,但是长期运行后,大片的内存会比较少,而1页,2页,4页这种内存会非常多,当我们分配大片连续内存的时候就会出问题。换句话说就是以产生内部碎片为代价来避免外部碎片的产生。 Linux针对大内存的物理地址分配,采用Buddy伙伴算法,如果是针对小于一个page的内存,频繁的分配和释放,则不宜用Buddy伙伴算法。

注:
“内部碎片”,是指系统已经分配给用户使用、用户自己没有用到的那部分存储空间;
“外部碎片”,是指系统无法把它分配出去供用户使用的那部分存储空间。

二、CMA算法

应用程序中申请一块内存,在应用程序看来是连续的,因为虚拟地址本身是连续的,但实际的内存空间中,所申请的这片内存未必是连续的,不过这对应用程序来说是没关系的,因为应用程序不需要关心实际的内存情况,只要MMU把物理地址映射成虚拟地址就好了。但是如果没有MMU的情况呢,我们又需要一片连续的内存空间,比如设备通过DMA直接访问内存,这种情况下应该怎么办呢?

CMA机制就是为了解决上面提到的问题而产生的。DMA zone并不是DMA专属,其它的程序也可以申请该zone的内存,如果当设备要申请DMA zone空间的一大片连续的内存时候,已经没有连续的大片内存了,只有1页,2页,4页的这种连续的小内存。解决办法就是我们标记某一片连续区域为CMA区域,这部分区域在没有大片连续内存申请的时候只给moveable的程序使用,当大片连续内存请求来的时候,我们去这片区域,把所有moveable的小片内存移动到其它的非CMA区域,更改对应的程序的页表,然后再把空出来的CMA区域给设备,从而实现了DMA大片连续内存的分配。

CMA机制并不是单独存在的,它通常服务于DMA设备,在设备调用dma_alloc_coherent函数申请一块内存后,为了得到一片连续的内存,CMA机制被调用,它保证了申请的内存的连续性。

另外CMA区域通常被分配在高端内存。

 
 
三、slab算法

前面我们了解了:Linux的最底层,由Buddy算法管理着所有的空闲页面,最小单位是2的0次方页,就是1页,4K,但是很多时候,我们为一个结构分配空间,也只需要几十个字节,按页分配无疑是浪费空间;另外,当我们频繁的分配和释放一个结构,我们希望在释放的时候,这部分内存不要立刻还给Buddy,而是提供一种类似C库的管理机制,在下一次在分配的时候还可以拿到同一块内存且保留着基本的数据结构。基于上面两点,Slab应运而生。总结一下,Slab主要提供以下两个功能:

  • 对从Buddy拿到的内存进行二次管理,以更小的单位进行分配和回收(注意,是回收而不是释放),防止了空间的浪费。

  • 让频繁使用的对象尽量分配在同一块内存区间并保留基本数据结构,提高程序效率。

那么,Slab是如何工作的呢?

如果某个结构被频繁的使用,内核源码就可以针对这个结构建立一个或者多个Slab分区(姑且这么叫),每一个Slab分区从Buddy拿到1页或者多页内存,并把这些内存划分为多个等分的这个结构大小的小块内存,这些Slab分区只用于分配给这个结构,通常称这个结构为object,每一次当有该object的分配请求,内核就从对应的Slab分区拿一小块内存给object,这样就实现了在同一片内存区间为频繁使用的object分配内存。请看下图

 
 

黑框表示频繁使用的结构;红框表示slab分区,一个结构内核可能为它分配一个或多个Slab;每个Slab分区有可能包含多个page,被分隔开的多个红框表示Slab分区的多个pages;蓝框表示Slab分区为对应的Object划分的一个一个的小内存块。填充黄色的框表示active的object,灰色填充的框表示未active的object,如果整个Slab分区的所有蓝框都是灰色的,表示这个Slab分区是未active的。

Linux为用户提供了Slab的文件查看接口,和命令接口,比如:

cat /proc/slabinfo:

 
 

slab主要分为两类:一类是内核里常用的数据结构,如TCPv6,UDPv6等,由于内核经常要申请和释放这类数据结构,所以就针对这些数据结构做一个slab,然后再次申请这类结构体时就总是从这个slab里来申请一个object(使用kmem_cache_alloc()申请)。另一类是一些小粒度的内存申请,如slabinfo中的kmalloc-16,kmalloc-32等(使用kmalloc()申请)。

上图所示为slabinfo文件的内容,针对表头解释下:

表头 解释
Name Object名字
Active_objs 已经激活的投入使用的object个数
Num_objs 为这个object分配的小内存块个数
Objsize 每一个内存块的大小
Objperslab 每一个Slab分区包含的object个数
Pagesperslab 每个Slab分区包含的page的个数
Active_slabs 已经激活的投入使用的Slab分区个数
Num_slabs 为这个object分配的Slab分区个数

最后再说一句,slab只用于分配低端内存,所分配的内存也只会被映射到物理内存映射区,所以vmalloc跟slab一毛钱关系都没有。

四、Slab与Buddy的关系
  • slab与Buddy都是内存分配器。
  • slab的内存来自Buddy
  • slab与Buddy在算法上级别对等。Buddy把内存条当作一个池子来管理,slab是把从Buddy拿到的内存当作一个池子来管理的。

rel: https://www.jianshu.com/p/271c316b53ef

分享到:
评论

相关推荐

    操作系统内存分配算法

    操作系统内存分配算法 操作系统内存分配算法是操作系统中的一种关键技术,用于管理和分配计算机的内存资源。好的内存分配算法可以提高系统的性能和效率,而坏的内存分配算法可能会导致系统崩溃或性能下降。因此,...

    操作系统课程设计动态内存分配算法

    操作系统课程设计中的动态内存分配算法是一项关键的技能,它涉及到计算机系统如何有效地管理内存资源,以满足程序运行时的需求。动态内存分配允许程序在运行时请求和释放内存,而不是在编译时固定内存大小。这样的...

    内存分配算法课程设计(Eclipse+Java)

    内存分配算法是操作系统核心部分的关键技术之一,它负责有效地管理和分配计算机内存资源。在这个课程设计中,我们将使用Java编程语言在Eclipse集成开发环境中实现内存分配的模拟。Eclipse因其强大的调试工具和丰富的...

    C内存分配算法之一最优先分配

    最优先分配(Best Fit)是一种内存分配算法,旨在优化内存利用率,减少内存碎片问题。这种策略通常用于动态内存分配,例如使用`malloc()`、`calloc()`、`realloc()`和`free()`等函数。 内存分配的目的是将程序所需...

    操作系统之内存分配算法

    ### 操作系统之内存分配算法 #### 内存分配与回收概述 在计算机科学领域,尤其是操作系统设计中,内存管理是至关重要的一部分。合理的内存管理能够有效地利用系统资源,提高程序运行效率。内存分配与回收机制作为...

    动态内存分配算法(源代码&报告)DynamicAllocate

    总的来说,动态内存分配是程序设计中的核心概念之一,理解和掌握各种分配算法及其优缺点、正确使用内存分配函数以及避免内存问题对于开发高效、稳定的软件至关重要。通过分析和实现这些算法,我们可以更好地理解内存...

    操作系统中能够模拟动态内存分配算法来对进程分配内存空间的全部源代码及课设报告

    能够模拟动态内存分配算法对进程分配内存空间。该程序具备的基本功能为: (1)能够以空闲分区表的形式显示某一时刻内存空间的使用情况。 (2)能够创建进程即输入进程信息,包括进程名称和进程需要的内存量, 系统...

    嵌入式系统的自适应动态内存分配算法

    ### 嵌入式系统的自适应动态内存分配算法 #### 一、引言 随着嵌入式技术的不断发展,高效管理动态内存变得尤为重要。本文针对嵌入式系统的特点,提出了一种新的动态内存管理方案。该方案在借鉴两种经典算法的基础...

    TLSF动态内存分配算法的研究与应用

    详细介绍了TLSF(Two Level Segregated Fit)动态内存分配算法的实现过程,包括内存池的创建初始化、动态内存的分配与释放。把TLSF移植到μC/OSII实时操作系统上,移植后的系统在基于CortexM3内核的LPC1768处理器上...

    一种基于VXWORKS的内存分配算法

    一种基于VXWORKS的内存分配算法.pdf

    动态内存分配算法实验报告

    ### 动态内存分配算法实验报告知识点解析 #### 一、实验题目与目的 - **实验题目**: 动态内存分配算法 - **实验目的**: - 深入理解动态分区存储管理中内存分配与回收的具体实现方法。 - 掌握动态分区管理的基本...

    内存分配算法--最先适应、最佳适应、最坏适应

    内存分配是操作系统中至关重要的部分,它涉及...总的来说,内存分配算法是操作系统设计的关键组成部分,它们对系统的性能和效率有直接影响。通过理解并比较这三种方法,开发者可以根据系统需求选择最优的内存管理策略。

    NEICUN.rar_内存分配算法_模拟内存分配

    - 压缩内存分配算法:通过合并相邻的空闲块,减少内存碎片。 - 快速分配策略:预分配内存或使用池技术,提高分配效率。 - 分区技术:根据内存大小和应用需求,将内存划分为多个分区,采用不同的分配算法。 总结...

    内存分配算法,包括first-fit,best-fit等

    内存分配算法 内存分配算法是计算机科学中一个非常重要的概念,它直接关系到计算机系统的性能和效率。本文将详细介绍内存分配算法,包括.first-fit、best-fit 等算法,并对其进行比较和分析。 内存分配的概念 ...

    一种基于VxWorks的内存分配算法

    ### 一种基于VxWorks的内存分配算法 #### 摘要 本文研究了VxWorks系统的内存分配算法,并指出了传统内存管理算法存在的局限性。在此基础上,提出了一种改进的内存分配算法,该算法主要包括优化的内存块分配算法和...

    内存分配算法.doc

    "内存分配算法" 本实验报告的主要目的是理解内存的连续分配技术,掌握动态分区分配和回收的思想,并实现动态分区分配算法的原理。 知识点1:内存分配技术 内存分配技术是操作系统中的一种重要技术,它用于管理和...

    模拟操作系统最先 最佳 最坏 内存分配算法.doc

    模拟操作系统最先 最佳 最坏 内存分配算法 本文档主要介绍了操作系统中内存分配算法的模拟实现,包括最先适应分配算法、最佳适应分配算法和最坏适应分配算法三种算法。文章将详细地介绍每种算法的实现原理、代码...

    操作系统中 固定内存分配算法

    操作系统中的固定内存分配算法是管理计算机内存资源的一种策略,它主要关注如何有效地为进程分配内存,以确保系统的稳定运行和高效利用。固定内存分配通常在早期的操作系统中使用,尤其是在那些资源有限且硬件不支持...

    操作系统 内存分配算法实验报告

    在操作系统的设计与实现中,内存分配算法是一项至关重要的技术。本实验报告将深入探讨C++编程语言实现的操作系统内存分配算法。 首先,我们要了解内存分配的基本概念。内存分为物理内存和虚拟内存两部分,其中物理...

Global site tag (gtag.js) - Google Analytics