论坛徽章:: 0

电梯直达

1楼 [收藏(0)] [报告]

发表于 2011-04-10 17:04 |只看该作者 |倒序浏览

想做个模块，目的是扫描所有使用中的内存页面(内核+用户)，并对每个页面的内容计算hash，
请问达到这个目的需要怎么个思路，大概用到哪些函数或接口呢？

目前的想法，得到每个页表，一个一个察看，并计算？不知是否可行，这样的话需要用到哪些函数呢？
新手请教，谢谢

文库|博客

omycle

小富即安

论坛徽章:: 0

2楼 [报告]

发表于 2011-04-11 18:57 |只看该作者

好主意，很有趣.期待reslove

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

accessory

荣誉版主

论坛徽章:: 0

3楼 [报告]

发表于 2011-04-12 06:00 |只看该作者

我觉得把所有的页表看一遍效率不高。可以直接看物理地址啊。写个LKM, 得到 E820 MAP, 然后根据物理地址全都扫描一遍。。。。不过 E820里面有很多其他信息，比如OPTION ROM , ACPI 占用的内存空间。

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

8913845

白手起家

论坛徽章:: 0

4楼 [报告]

发表于 2011-04-13 10:05 |只看该作者

谢谢指点，我试试看：）

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

zhy-linux

白手起家

论坛徽章:: 0

5楼 [报告]

发表于 2011-04-13 10:59 |只看该作者

还有一种方法，就是利用内核里面的buddy system,循环扫描所有节点和每个节点下面zone的所有一面，也能做到

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

omycle

小富即安

论坛徽章:: 0

6楼 [报告]

发表于 2011-04-13 16:55 |只看该作者

我个人感觉，只扫描slab部分会不会更有意义一些？

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

zhy-linux

白手起家

论坛徽章:: 0

7楼 [报告]

发表于 2011-04-13 18:18 |只看该作者

回复 6# omycle

slabe是基于buddy system之上的，里面只是保留了部分从buddy system得来的memeory，而不是所有的内存

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

8913845

白手起家

论坛徽章:: 0

8楼 [报告]

发表于 2011-04-20 12:42 |只看该作者

终于搞定了，呵呵，
本打算用内核模块的，申请一个页面大小的虚拟地址空间，通过修改其对应的页表项把这个空间映射到指定的物理内存页，再进行读取。

但是这样实现起来比较困难，后来在网上发现一个很简单的方法，利用/dev/mem设备文件就可以访问所有的物理内存了。

所以用open,read,就能搞定了，用mmap映射后访问起来也很方便，于是我用mmap因映射后再访问物理页面。不过在实现的过程中来发现/dev/mem的fops中的read,mmap函数对访问的物理地址空间有限制，很多物理地址空间不能访问。

网上搜了一下，是内核的CONFIG_X86_PAT功能和CONFIG_STRICT_DEVMEM(我用得debian这个选项是另外一个名字)功能的限制，把这个功能关掉，发现还是不行。

于是看了一下这连个功能的对应的代码，发现他们俩是或地关系，总有一个会成立，只好把这个做限制的函数注译掉，重新生成内核，终于可以正常访问了。哈哈