生产环境,约200用户, sys持续占用cpu, 能请各位分析一下吗 谢谢(附参数)

yannanqi

服务器配置; 2g内存, 单cpu, 主频2g,
-------------------------------------------------
sar -u 1 50

SCO_SV lk1 3.2v5.0.6 i80386    04/12/2006

08:48:55    %usr    %sys    %wio   %idle (-u)
08:48:56      29      71       0       0
08:48:57      31      69       0       0
08:48:58      39      61       0       0
08:48:59      29      66       5       0
08:49:00      23      70       5       3
08:49:01       8      38       0      54
08:49:02      16      46      36       2
08:49:03      15      51      34       0
08:49:04      20      60      20       0
08:49:05      17      70       2      12
08:49:06       6      37      11      46
08:49:07      15      60      25       0
08:49:08      16      59      25       0
------------------------------------------------------------
sar -c 1 50

SCO_SV lk1 3.2v5.0.6 i80386    04/12/2006

08:48:57 scall/s sread/s swrit/s  fork/s  exec/s  rchar/s  wchar/s (-c)
08:48:58   43745   13937    4156   45.00   44.00 27208818   227877
08:48:59   45190   18104    5434   14.85   14.85 25713103   334460
08:49:00   33609   11249    5275    7.84   13.73 21806598   334742
08:49:01   10411    2565    1109    5.88    6.86 19752858    98588
08:49:02   26502    6061    5190    0.00    0.00 21379851   330326
08:49:03   35669   11182    1105    0.00    0.00 22595523   161023
08:49:04   19952    6836    2065    4.90    6.86 21289214   158088
08:49:05   36197    9939    4900    4.95    7.92 21844614   286468
08:49:06    6750    1081    1065    0.00    0.00 19742975    97485
08:49:07   40795   16377     917    0.98    1.96 22958916    88709
08:49:08   37910   14632    1146    5.00    7.00 22989819   105066
08:49:09   42238   12780    5315    4.90   10.78 22428727   328647
08:49:10   46610   17573     931    6.93    8.91 23551687    92849
08:49:11   44101   16105    1717    0.98    1.96 23381991   135214
08:49:12   68878   24020    3844    0.99    7.92 25805623   248490
08:49:13   14767    3981    2647    2.97    2.97 20152029   179869

------------------------------------------------------------
sar -d 1 50

SCO_SV lk1 3.2v5.0.6 i80386    04/12/2006

08:48:56  device   %busy     avque     r+w/s    blks/s    avwait    avserv (-d)
08:48:57 Sdsk-0   100.00      1.00     24.51    225.49      0.00    145.20

08:48:58 Sdsk-0    96.00      1.00      9.00    160.00      0.00    106.67

08:48:59 Sdsk-0   100.00      1.81    258.42   1576.24     42.15     52.18

08:49:00 Sdsk-0   100.00      1.28    497.12   1923.08     12.11     42.82

08:49:01
08:49:02 Sdsk-0    38.00      1.00      1.00     20.00      0.00    380.00

08:49:03 Sdsk-0   100.00      1.00     28.71     57.43      0.00     51.72

08:49:04 Sdsk-0   100.00      1.53    322.77   1516.83     49.94     94.20

08:49:05 Sdsk-0   100.00      1.65    305.88   1290.20     23.65     36.12

----------stune--------------------------------------------------
NODE        "sd1"
NSPTTYS        4080
EVQUEUES        4088
EVDEVS        4096
NUMSP        256
NSTREAM        16640
NHINODE        1024
GPGSLO        2000
GPGSHI        6000
PLOWBUFS        1024
NSTRPAGES        6000
NAIOPROC        50
NAIOREQ        400
NAIOBUF        400
NAIOHBUF        100
NAIOREQPP        400
NAIOLOCKTBL        50
MAX_PROC        10000
MAXUMEM        1048576
NCALL        256
NCLIST        2048
NSTREVENT        32768
NUMTIM        4960
NUMTRW        4960
SDSKOUT        64
SEMMAP        8192
SEMMNI        8192
SEMMNS        8192
SEMMSL        150
SEMMNU        100
SHMMAX        2147483647
TTHOG        4096
SECLUID        0
SECSTOPIO        1
SECCLEARID        1
MAXUP        3000
NOFILES        3000
MSGMNI        300
-------------------
sar -q 1 50

SCO_SV lk1 3.2v5.0.6 i80386    04/12/2006

08:48:55 runq-sz %runocc swpq-sz %swpocc (-q)
08:48:56     1.0     100               
08:48:57     7.0     100               
08:48:58     8.0     100               
08:48:59     6.0     100               
08:49:00     5.0     100               
08:49:01                                
08:49:02     3.0     100               
08:49:03     1.0     100               
08:49:04    18.0     100               
08:49:05     5.0     100               
08:49:06     3.0     100               
08:49:07     2.0     100               
08:49:08     9.0     100               
08:49:09     8.0     100               
08:49:10     3.0     100               
08:49:11     3.0     100               
08:49:12    10.0     100               
08:49:13     1.0     100               
08:49:14     1.0     100               
08:49:15     2.0     100               
08:49:16     5.0     100               
08:49:17     5.0     100               
08:49:18                                
----------------------------------------------
vmstat 1 20

PROCS     PAGING                                          SYSTEM  CPU
r  b  w  frs dmd sw cch fil pft frp pos pif pis rso rsi  sy  cs  us su id

6 1538  0 128000  54   0 463   0 164   0   0  0   0   0   0 110633 2925  25 55 20
1 1543  0 128000 113   0   0   0  13   0   0  0   0   0   0 6501 2600   7 43 50
5 1539  0 128000   0   0   0   0   0   0   0  0   0   0   0 5690 2390   4 33 63
4 1542  0 128000  30   0 211   1  61   0   0  0   0   0   0 7290 2566  11 39 50
1 1545  0 128000   6   0   0   4   7   0   0  0   0   0   0 7101 2728   7 64 29
5 1541  0 128000 183   0   0   5   1   0   0  0   0   0   0 19057 2930  21 78  1
3 1544  0 128000  54   0 699   0 196   0   0  0   0   0   0 39120 3388  21 73  6
7 1540  0 128000 227   0 549   0  66   0   0  0   0   0   0 26511 3276  10 56 34
1 1546  0 128000  15   0   0   0   0   0   0  0   0   0   0 22011 2918  10 42 48
4 1543  0 128000  11   0   0   0   0   0   0  0   0   0   0 30982 3106  17 48 35
2 1545  0 128000   0   0   0   0   0   0   0  0   0   0   0 5726 2398   7 30 63
4 1543  0 128000  36   0   2  15   2   0   0  0   0   0   0 22718 2841  11 43 46
3 1544  0 128000   4   0   0   1   1   0   0  0   0   0   0 6215 2523   7 46 47
3 1544  0 128000 107   0   0   0   0   0   0  0   0   0   0 38398 3200  15 77  8
6 1543  0 128000  25   0 170   0  43   0   0  0   0   0   0 17951 2870  16 62 22
12 1535  0 128000   0   0   7   0  26   0   0  0   0   0   0 22321 2788  15 84  1
3 1544  0 128000   8   0   0   0  97   0   0  0   0   0   0 28764 2912  14 51 35
2 1545  0 128000  21   0   0  10  25   0   0  0   0   0   0 62854 3411  24 62 14
1 1548  0 128000 128   0 223   0  85   0   0  0   0   0   0 27765 3108  31 69  0
2 1549  0 128000  20   0 366   1  52   0   0  0   0   0   0 25841 3033  13 87  0

------------------------------------------------------------
平时一般有200左右的用户, 内存有很大空闲, 请问:
1) sys占用cpu是user的2~3倍是否是因为cpu处理能力不够导致的正常现象?
2) sar -c输出中, scall和rchar这么高的值是否正常?( 注: rchar的值平时是7位数, 我做测试时才这么高)
3) sar -q 中runq-sz 和vmstat中的r是一回事吗, 如果是的话, 这两个值指的是"正在运行的进程数"还是"等待运行的进程数"? 上面测试中输出的值正常吗?

[ 本帖最后由 yannanqi 于 2006-4-12 11:27 编辑 ]

ChinaOK

UP

yannanqi

老大们看看啊

lw371

http://bbs.chinaunix.net/viewthr ... 9&highlight=CNL

yannanqi

谢谢lw, 我看了你推荐的帖子, 不过我的问题还是没得到解答啊

平时一般有200左右的用户, 内存有很大空闲, 请问:
1) sys占用cpu是user的2~3倍是否是因为cpu处理能力不够导致的正常现象?
2) sar -c输出中, scall和rchar这么高的值是否正常?( 注: rchar的值平时是7位数, 我做测试时才这么高)
3) sar -q 中runq-sz 和vmstat中的r是一回事吗, 如果是的话, 这两个值指的是"正在运行的进程数"还是"等待运行的进程数"? 上面测试中输出的值正常吗?

sam_8286

查看一下占用cpu，并且时间不断增加的进程

yannanqi

我查了, 没有这样的进程

sam_8286

-q出来的那些runq-sz说明内存中有进程在等待嘛，
感觉应该是有进程占着cpu了，而且磁盘也那么繁忙，

willcasper

看不明白,看到那么多的状态参数就头痛

yannanqi

sar -d中, %busy值到底是高了好还是低了好?　我感觉ｂｕｓｙ应该是低了好，可是看过老大一篇转贴([精华] 在UNIX5_0_5 系统中巧用sar 命令进行系统维护)，里面有这么一段：
  [[[在显示的内容中，wd-0是硬盘的名字，%busy的值比较小，说明用于处理传送请求的有效时间太少，文件系统效率不高，一般来讲，%busy值高些，avque值低些，文件系统的效率比较高，如果%busy和avque值相对比较高，说明硬盘传输速度太慢，需调整。]]]

怎么说ｂｕｓｙ低了的话，文件系统效率不高呢？