linux操作系统总是一卡一卡的

cccdbmw

正式服务器
第一次
time dd if=/dev/zero of=/tmp/test bs=8k count=300000
300000+0 records in
300000+0 records out
2457600000 bytes (2.5 GB) copied, 16.8798 seconds, 146 MB/s

real    0m16.894s
user    0m0.064s
sys     0m6.050s


time dd if=/tmp/test of=/dev/null bs=8k
300000+0 records in
300000+0 records out
2457600000 bytes (2.5 GB) copied, 1.54539 seconds, 1.6 GB/s

real    0m1.547s
user    0m0.032s
sys     0m1.516s

第二次
time dd if=/dev/zero of=/tmp/test bs=8k count=300000
300000+0 records in
300000+0 records out
2457600000 bytes (2.5 GB) copied, 17.1126 seconds, 144 MB/s

real    0m18.452s
user    0m0.058s
sys     0m7.107s

time dd if=/tmp/test of=/dev/null bs=8k
300000+0 records in
300000+0 records out
2457600000 bytes (2.5 GB) copied, 1.61596 seconds, 1.5 GB/s

real    0m1.619s
user    0m0.022s
sys     0m1.570s

第三次
time dd if=/dev/zero of=/tmp/test bs=8k count=300000
300000+0 records in
300000+0 records out
2457600000 bytes (2.5 GB) copied, 48.8728 seconds, 50.3 MB/s

real    0m49.543s
user    0m0.071s
sys     0m8.997s


time dd if=/tmp/test of=/dev/null bs=8k
300000+0 records in
300000+0 records out
2457600000 bytes (2.5 GB) copied, 1.58619 seconds, 1.5 GB/s

real    0m1.588s
user    0m0.021s
sys     0m1.568s

测试服务器
time dd if=/dev/zero of=/tmp/test bs=8k count=300000
300000+0 records in
300000+0 records out
2457600000 bytes (2.5 GB) copied, 8.4215 seconds, 292 MB/s

real    0m8.424s
user    0m0.050s
sys     0m5.990s
time dd if=/tmp/test of=/dev/null bs=8k
300000+0 records in
300000+0 records out
2457600000 bytes (2.5 GB) copied, 1.74364 seconds, 1.4 GB/s

real    0m1.746s
user    0m0.026s
sys     0m1.717s
time dd if=/dev/zero of=/tmp/test bs=8k count=300000
300000+0 records in
300000+0 records out
2457600000 bytes (2.5 GB) copied, 5.37527 seconds, 457 MB/s

real    0m19.198s
user    0m0.062s
sys     0m6.095s
time dd if=/tmp/test of=/dev/null bs=8k
300000+0 records in
300000+0 records out
2457600000 bytes (2.5 GB) copied, 1.67039 seconds, 1.5 GB/s

real    0m1.672s
user    0m0.026s
sys     0m1.643s

    time dd if=/dev/zero of=/tmp/test bs=8k count=300000
300000+0 records in
300000+0 records out
2457600000 bytes (2.5 GB) copied, 5.36442 seconds, 458 MB/s

real    0m19.233s
user    0m0.058s
sys     0m6.212s
time dd if=/tmp/test of=/dev/null bs=8k
300000+0 records in
300000+0 records out
2457600000 bytes (2.5 GB) copied, 1.80816 seconds, 1.4 GB/s

real    0m1.810s
user    0m0.028s
sys     0m1.782s

yanu

居然有swap in ... 贴free -m 看下

观察下是不是每次卡的时候vmstat的第一列值都比较高，伴随着si/so列数值相对比较高

biguy

优化！优化！

cccdbmw

free -m
             total       used       free     shared    buffers     cached
Mem:         24107       5783      18323          0         77       3911
-/+ buffers/cache:       1794      22312
Swap:        16402       6481       9921




现在是怪事，以前一卡的时候就是2000~3000ms，卡的间隔大了

chenyx

对比数据,明显你的服务器比测试服务器的写性能差,另外,楼上也说,有swap的in/out操作,估计你还得从这些方面找原因吧

cccdbmw

嗯，我们这边有个程序是单线程的，每秒都在操作数据库，数据库经常内存用完，而且swap也用了很多，使用sync指令之后，内存又释放了很多


   

cccdbmw

#vmstat 1
   
卡的时候r的时候上升，但是si/so没怎么变化

yanu

这张貌似抓到了,CPU全被应用程序占用了，但是100个进程处于runnable状态，in和cs(中断和上下文切换)却很低，这个我还没想明白，一般情况下如果runnable状态的进程很多，sys应该会占用比较多的CPU，同时in和cs应该比较高
可能CPU全被某几个进程占用了,可以试试能不能抓到是哪些进程占用的CPU ，比如 top -b >top.log

chenyx

楼主将oracle停了,然后将你的那个程序也停了,看看系统还卡不卡了.

kerving

我觉得你先监测一下系统资源的的使用情况，搞清是那个进程造成的