讨论memory pool，关于对性能的影响

rocenting

今天把nginx server的memory pool的方式，模仿实现了一遍，用于自己的一个项目，简单测试，感觉memory pool，速度优势没有想象的大。在一台服务器上测试，分配10240000个128bytes块内存，以10M为一个预分配块（如果预分配块为1k，性能比直接用malloc还差），并自动grow，用memory pool的方式大概用了1秒，直接用malloc然后free，大概用了4秒。由于限制字数的，全部代码是发不上来的，郁闷。

#include "mem_pool.h" #define CNT 12400000 char *addr[CNT]; int main(void) { &nbsp;&nbsp;&nbsp;&nbsp;int i; &nbsp;&nbsp;&nbsp;&nbsp;struct _mem_pool *p; &nbsp;&nbsp;&nbsp;&nbsp;time_t last, cur; &nbsp;&nbsp;&nbsp;&nbsp; &nbsp;&nbsp;&nbsp;&nbsp;last = time(NULL); &nbsp;&nbsp;&nbsp;&nbsp;p = create_mem_pool(102400); &nbsp;&nbsp;&nbsp;&nbsp; &nbsp;&nbsp;&nbsp;&nbsp;for (i = 0; i < CNT; i++) { &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;addr[i] = mem_pool_alloc(p, 128); &nbsp;&nbsp;&nbsp;&nbsp;} &nbsp;&nbsp;&nbsp;&nbsp;destroy_mem_pool(p); &nbsp;&nbsp;&nbsp;&nbsp;p = NULL; &nbsp;&nbsp;&nbsp;&nbsp;cur = time(NULL); &nbsp;&nbsp;&nbsp;&nbsp;printf("[%d]\n", cur - last); &nbsp;&nbsp;&nbsp;&nbsp;last = time(NULL); &nbsp;&nbsp;&nbsp;&nbsp;for (i = 0; i < CNT; i++) { &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;addr[i] = malloc(128); &nbsp;&nbsp;&nbsp;&nbsp;} &nbsp;&nbsp;&nbsp;&nbsp; &nbsp;&nbsp;&nbsp;&nbsp;for (i = 0; i < CNT; i++) { &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;free(addr[i]); &nbsp;&nbsp;&nbsp;&nbsp;} &nbsp;&nbsp;&nbsp;&nbsp;cur = time(NULL); &nbsp;&nbsp;&nbsp;&nbsp;printf("[%d]\n", cur - last); &nbsp;&nbsp;&nbsp;&nbsp;return 0; }

[ 本帖最后由 rocenting 于 2009-11-9 00:24 编辑 ]

zhoubug

这个测试片面拉，从头到尾只分配，内存池的一个优点在于对频繁从池中申请释放再申请再释放内存块这样一种程序长期运行的情况可以减少内存碎片（还要看内存池实现的特点），
提高分配效率，直观的来看就是程序运行一段时间稳定后，查看系统状态，内存的使用情况很稳定。

rocenting

原帖由 zhoubug 于 2009-11-9 09:12 发表
这个测试片面拉，从头到尾只分配，内存池的一个优点在于对频繁从池中申请释放再申请再释放内存块这样一种程序长期运行的情况可以减少内存碎片（还要看内存池实现的特点），
提高分配效率，直观的来看就是程序运 ...

减少内存碎片很难定量得出数据的，理论上是有好处的。

我前面考虑做这个主要是提高速度的。

我见别人实现的有提高10倍的，我感觉很可疑。

peidright

Glib 有自己的通用内存池。搞清楚glibc的内存池的实现的情况下，你就知道用什么样的用例，才能使malloc更糟糕，而你的更好