论坛徽章:: 0

电梯直达

1楼 [收藏(0)] [报告]

发表于 2004-05-28 09:38 |只看该作者 |倒序浏览

现我遇到了一个问题，因为对shell编程不熟悉，

我们的Web服务器建有缓存，需要定期清理，但是由于缓存过于庞大（缓存目录下有大量子目录，子目录下有大量(万级或十万级）文件），删除缓存时会占用大量CPU,严重影响我们的Web服务。
我想做一个shell脚本，定期清理缓存，并且占用极少的cpu,我并不需要很快的清理，就算运行一整天也无所谓，只需要占用极少的cpu，最好可以通过时间判断清除老的缓存，在后台运行，慢慢的清除掉一天前或两天前的缓存，占用极少的cpu。
能给一些指导吗？我对shell不熟悉，请解释的详细一些。

文库|博客

xyb

白手起家

论坛徽章:: 0

2楼 [报告]

发表于 2004-05-28 10:03 |只看该作者

定期清理庞大的缓存，并且占用极少cpu.???

你说的有一万甚至十万文件是在一个目录里，还是多个目录里加起来的。如果都在一个目录里可能会影响访问效率，最好能改进一下。

你说慢，影响web服务，你首先得找到是那个步骤造成了这种影响──通过自己的试验。我想要考虑的可能有两个：检索过期文件时，或者删除文件时。找到最影响系统运行的因素，就可以对症下药：
检索文件方面，除了靠减少一个目录下文件的数量(最好控制在1000以内)来改进访问目录的速度，还可以分次检索，一次只检索一个子目录，这样把每次检索的范围缩小也可能缓解对cpu和hard disk的冲击；删除文件也是类似的思想，比如把原来在一次里删除的十万个文件分成一千组，每隔五秒删一组(也就是一百来个)，这样把系统负担均匀分摊到一个比较长的时间段也会缓解系统压力。