Memcached Slab分配器:零碎片的极速内存管理

Memcached 的内存分配器采用 Slab Allocation 机制管理内存,其工作原理如下:

⚙️ 一、内存分配器工作原理

Page 1MB
Slab Class 1
chunk=96B
Slab Class 2
chunk=120B
Slab Class N
chunk=自定义
Chunk 1
Chunk 2
Chunk 1
  1. 三级内存结构

    • Page(页):内存分配基本单位,默认为 1MB。启动时按需分配,不被回收。
    • Slab Class(分片类):每个 Page 划分给特定 Slab Class,Slab Class 按 固定比例(默认 1.25)递增 chunk 大小。
    • Chunk(块):存储数据的固定单元,大小由所属 Slab Class 决定(如 96B/120B/…)。
  2. 数据存储流程

    • 新数据写入时,匹配能容纳其大小的最小 Chunk(如 230B 数据匹配 280B Chunk)。
    • 若 Slab Class 无空闲 Chunk,分配新 Page 分割为 Chunk 数组。
    • 释放数据后,Chunk 标记为空闲,原地复用不归还 OS。
  3. 内存池特性

    • 所有 Chunk 大小固定,避免内存碎片。
    • 通过 stats slabs 命令监控各 Slab Class 利用率。

❌ 二、为什么不使用 malloc/free?

问题malloc/free 缺陷Slab 解决方案
内存碎片频繁分配释放 → 外部碎片 → 内存利用率↓固定大小 Chunk → 零碎片
性能瓶颈高并发时锁竞争开销大 → 响应延迟↑无锁操作空闲链表 → 微秒级分配
OS 负担OS 需搜索连续内存块 → 挤压应用资源应用层自主管理 → 减少 OS 交互
不确定性执行时间不可预测 → 实时性差恒定时间分配 → 高确定性

🔧 三、为何使用 Slabs?

  1. 根治内存碎片
    通过 预分割固定大小 Chunk,消除外部碎片,内存利用率趋近 100%。

  2. 极速分配性能

    • 分配操作简化为 空闲链表指针移动,速度比 malloc 快 10 倍以上。
    • 无锁设计适应高并发场景。
  3. CPU 缓存友好
    同尺寸 Chunk 连续存储 → 提升 CPU 缓存命中率

  4. 精细资源控制

    • 通过 -f 调节 Chunk 增长因子,优化业务数据类型匹配。
    • 内存超限时自动淘汰旧数据(LRU)。

💡 本质取舍:Slab 以 少量内部碎片(如 230B 数据用 280B Chunk)换取 零外部碎片+超高分配性能,完美契合缓存系统的高吞吐需求。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

代码的余温

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值