0

0

c++中如何实现一个高性能的内存池? (减少malloc调用)

冰火之心

冰火之心

发布时间:2026-01-13 11:59:02

|

766人浏览过

|

来源于php中文网

原创

malloc在高频小对象分配时慢,因其需维护堆元数据、处理碎片、多线程加锁,且小对象反复申请易触发链表遍历或系统调用;内存池通过预分配大块内存并自行管理空闲链表实现O(1)无锁分配回收。

c++中如何实现一个高性能的内存池? (减少malloc调用)

为什么直接用 malloc 在高频小对象分配时会慢?

因为 malloc 要维护堆元数据、处理碎片、加锁(多线程下),每次调用都有可观开销。小对象(比如几十字节)反复申请释放,malloc 内部可能退化为链表遍历或触发系统调用(如 sbrkmmap),延迟不可控。

内存池的核心思路是:一次性向 OS 申请一大块内存(比如 4MB),自己管理这块内存的分配与回收,完全绕过 malloc 的运行时逻辑。

如何设计一个线程局部、固定大小的内存池?

最实用且高性能的做法是「每线程 + 固定块大小」,避免锁和跨核缓存行竞争。适用于已知对象大小的场景(如 std::shared_ptr 控制块、网络包头、节点结构体)。

  • thread_local 存储每个线程独享的空闲链表(std::stack 或裸指针链表)
  • 预分配一个大块(new char[pool_size]),按固定 block_size 切割,初始化成单向空闲链表
  • alloc() 直接弹出链表头,dealloc(void*) 直接插回链表头 —— 都是 O(1),无锁
  • 当空闲链表为空时,才触发一次 new char[chunk_size](比如 64KB),切块后挂入链表
class FixedSizePool {
    static constexpr size_t block_size = 64;
    static constexpr size_t chunk_size = 64 * 1024; // 64KB per chunk
    std::stack free_list_;
    std::vector> chunks_;
void grow() {
    auto chunk = std::make_unique(chunk_size);
    char* p = chunk.get();
    for (size_t i = 0; i < chunk_size; i += block_size) {
        free_list_.push(p + i);
    }
    chunks_.push_back(std::move(chunk));
}

public: void alloc() { if (freelist.empty()) grow(); void ptr = freelist.top(); freelist.pop(); return ptr; }

void dealloc(void* ptr) { free_list_.push(ptr); }

};

立即学习C++免费学习笔记(深入)”;

绘蛙-多图成片
绘蛙-多图成片

绘蛙新推出的AI图生视频工具

下载

如何避免对象构造/析构被跳过?

裸指针池只管内存,不调用构造函数。若分配的是类对象(如 MyClass),必须显式使用 placement new 和手动析构:

  • 分配后:new (ptr) MyClass(args...)
  • 销毁前:static_cast(ptr)->~MyClass()
  • 不能直接 delete ptr,也不能让智能指针默认删除器接管(它会调 delete
  • 可封装为模板类,用 std::allocator_traits 兼容 STL 容器(如 std::vector>

多线程共享池要不要加锁?

要,但代价高。除非有强理由(如内存极度受限、对象生命周期跨线程且无法预测),否则优先用 thread_local 池。如果真需共享:

  • std::atomic 实现无锁(CAS 循环),但要注意 ABA 问题;实践中 std::mutex 在争用不激烈时反而更稳
  • 避免把整个池锁住,可分片(shard):按地址哈希到 N 个子池,每个子池独立锁,降低冲突概率
  • 注意:Linux 下 malloc 本身已做 per-thread arena,自建共享池收益常不如预期,先压测对比

真正难的不是写出来,而是确定 block_sizechunk_size —— 这两个值卡得不准,要么浪费内存,要么频繁 new,性能反而比 malloc 差。建议从实际分配样本中统计对象大小分布,再向上对齐到 16/32/64 字节。

相关专题

更多
if什么意思
if什么意思

if的意思是“如果”的条件。它是一个用于引导条件语句的关键词,用于根据特定条件的真假情况来执行不同的代码块。本专题提供if什么意思的相关文章,供大家免费阅读。

734

2023.08.22

golang结构体相关大全
golang结构体相关大全

本专题整合了golang结构体相关大全,想了解更多内容,请阅读专题下面的文章。

194

2025.06.09

golang结构体方法
golang结构体方法

本专题整合了golang结构体相关内容,请阅读专题下面的文章了解更多。

187

2025.07.04

javascriptvoid(o)怎么解决
javascriptvoid(o)怎么解决

javascriptvoid(o)的解决办法:1、检查语法错误;2、确保正确的执行环境;3、检查其他代码的冲突;4、使用事件委托;5、使用其他绑定方式;6、检查外部资源等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

175

2023.11.23

java中void的含义
java中void的含义

本专题整合了Java中void的相关内容,阅读专题下面的文章了解更多详细内容。

96

2025.11.27

javascriptvoid(o)怎么解决
javascriptvoid(o)怎么解决

javascriptvoid(o)的解决办法:1、检查语法错误;2、确保正确的执行环境;3、检查其他代码的冲突;4、使用事件委托;5、使用其他绑定方式;6、检查外部资源等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

175

2023.11.23

java中void的含义
java中void的含义

本专题整合了Java中void的相关内容,阅读专题下面的文章了解更多详细内容。

96

2025.11.27

堆和栈的区别
堆和栈的区别

堆和栈的区别:1、内存分配方式不同;2、大小不同;3、数据访问方式不同;4、数据的生命周期。本专题为大家提供堆和栈的区别的相关的文章、下载、课程内容,供大家免费下载体验。

386

2023.07.18

PHP 表单处理与文件上传安全实战
PHP 表单处理与文件上传安全实战

本专题聚焦 PHP 在表单处理与文件上传场景中的实战与安全问题,系统讲解表单数据获取与校验、XSS 与 CSRF 防护、文件类型与大小限制、上传目录安全配置、恶意文件识别以及常见安全漏洞的防范策略。通过贴近真实业务的案例,帮助学习者掌握 安全、规范地处理用户输入与文件上传的完整开发流程。

5

2026.01.13

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL 教程
PostgreSQL 教程

共48课时 | 7万人学习

Git 教程
Git 教程

共21课时 | 2.6万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号