免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
1234下一页
最近访问板块 发新帖
查看: 7866 | 回复: 38
打印 上一主题 下一主题

[FreeBSD] freebsd内核模块中只能分配<80M内存,有何办法? [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2007-01-06 18:08 |只看该作者 |倒序浏览
同一中对象要占用300M以上内存,但是freebsd内核分配内存,同一中类型只能分80M以内
#vmstat -m
Memory statistics by type                          Type  Kern
     nexusdev     4     1K      1K 83806K        4    0     0  16
      memdesc     1     4K      4K 83806K        1    0     0  4K

同一中类型只能分配80M,不然就会失败,即便可用内存高达2GB!
好像不能用sysctl调节?

论坛徽章:
2
亥猪
日期:2014-03-19 16:36:35午马
日期:2014-11-23 23:48:46
2 [报告]
发表于 2007-01-06 21:04 |只看该作者
没 看懂

论坛徽章:
1
技术图书徽章
日期:2013-12-05 23:25:45
3 [报告]
发表于 2007-01-06 21:07 |只看该作者
/boot/loader.conf

kern.ipc.shmmax=67108864
## 线程可使用的最大共享内存

设置的看看,需要重启,是否可用。

论坛徽章:
0
4 [报告]
发表于 2007-01-08 09:29 |只看该作者
不是共享内存的限制,是内核中malloc分配同一种类型的内存,上限为80M:

内核代码中一般用使用
MALLOC_DECLARE(XX);
MALLOC_DEFINE(XX, "XX", "XX");
定义一种新的分配类型XX,分配内存时需要制定分配类型,诸如:
ptr = (type_t *)malloc(size, XX, M_NOWAIT);
但同一XX类型,只能分配80M,现在这么大是不够用的。
但同一中数据结构,又无法定义两种类型,因为释放内存的时候,也要指定类型
free(ptr, XX)。使用多种类型,释放的时候哪里知道该内存地址的类型。

我是要问:如何突破这个限制?

论坛徽章:
0
5 [报告]
发表于 2007-01-08 11:53 |只看该作者
还是改改算法吧,在内核中分配300M内存空间,太疯狂了。
大量的数据应该保存在用户空间。

论坛徽章:
0
6 [报告]
发表于 2007-01-08 18:28 |只看该作者
改算法?
我要保存千兆线速的网络中全部的tcp连接及udp/icmp虚拟连接等信息,连接量限制为400~500万个,每个连接至少占用96字节内存。80M怎么够?

论坛徽章:
0
7 [报告]
发表于 2007-01-08 18:57 |只看该作者
考虑uma分配呢?

论坛徽章:
0
8 [报告]
发表于 2007-01-09 09:48 |只看该作者
不知道uma分配,楼上的兄弟能不能讲讲?另外,freebsd4.11好像不支持这种分配方法吧?
现在要分配大量内存,同样性能要求也很高,所以同时也要兼顾内存分配的速度,以及长期运行内存碎片的数量。

论坛徽章:
2
技术图书徽章
日期:2013-09-04 15:21:51酉鸡
日期:2013-11-01 21:20:20
9 [报告]
发表于 2007-01-09 10:20 |只看该作者
看看这个参数设置:vm.kmem_size

论坛徽章:
0
10 [报告]
发表于 2007-01-09 10:23 |只看该作者
malloc(9)实际走的也是uma。malloc(9)根据请求尺寸的大小分别调用uma_zalloc()或uma_large_malloc()。和malloc(3)一样,影响malloc(9)成功与否的主要也有两个因素,因此所需内存本身是否能分配成功,二是对应的管理结构是否能分配成功。

ktrudger能不能把情况再讲得清楚详细一些,比如你到底是怎么去分配内存的,一次多少,多少次,最终的错误信息等等。另外,版本信息也应该一开始就交待清楚,要不是最后你自己说是4.11,别人谁知道呢?毕竟知道你一直在搞4.11的人不多哈。^_^

The zone allocator first appeared in FreeBSD 3.0. It was radically changed in FreeBSD 5.0 to function as a slab allocator. 所以,版本很重要。
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP