我的系统IO负荷相当高，请大家帮忙看看是什么问题啊？

zdz000

HP-UX sxdb3 B.11.11 U 9000/800    07/11/08

10:50:31    %usr    %sys    %wio   %idle
10:50:32       8       5      85       2
10:50:33      15       7      73       5
10:50:34      44       2      52       2
10:50:35      47       3      48       2
10:50:36      25       3      72       0
10:50:37      25       2      71       2
10:50:38      26       3      68       3
10:50:39      23       4      70       3
10:50:40      23       4      72       1
10:50:41      32       4      61       3
sxdb3-/opt/informix/etc> sar -d 1 100000

HP-UX sxdb3 B.11.11 U 9000/800    07/11/08

10:50:55   device   %busy   avque   r+w/s  blks/s  avwait  avserv
10:50:56   c0t6d0    2.97    0.64      21     154    0.10    2.70
           c3t6d0    0.99    0.67      18     143    0.06    1.38
          c18t0d2  100.00   32.48    1694   11450   19.43    4.69
          c18t0d1   99.01   38.51    2693   18760   14.76    2.91
          c18t0d5    0.99    0.50       3      36    0.00    2.01
10:50:57   c0t6d0    3.00    0.50      12      92    0.00    3.44
          c18t0d2  100.00   33.74    1712   10632   19.84    4.64
          c18t0d1  100.00   39.03    2508   17364   17.13    3.20
10:50:58  c18t0d2  100.00   31.74    1686    9661   19.46    4.79
          c18t0d1  100.00   41.80    2386   16190   18.70    3.35
10:50:59   c0t6d0    4.00    0.50      13     176    0.00    5.75
           c3t6d0    1.00    0.50      11     168    0.00    1.73
          c18t0d2  100.00   31.88    1653    9180   19.64    4.83
          c18t0d1  100.00   38.45    2310   17608   16.69    3.45
          c18t0d5    1.00    0.50       2      32    0.00    3.05
10:51:00  c18t0d2   99.01   32.40    1675    9473   19.54    4.71
          c18t0d1   98.02   43.14    2449   18329   18.10    3.19
10:51:01  c18t0d2  100.00   34.29    1671    9172   20.70    4.76
          c18t0d1  100.00   44.06    2232   20400   21.78    3.59
10:51:02   c0t6d0    1.00    0.50       5      32    0.00    2.50
           c3t6d0    1.00    0.50       3      24    0.00    2.75
          c18t0d2  100.00   30.91    1665    8824   19.05    4.80
          c18t0d1  100.00   38.59    2179   19032   18.94    3.66
10:51:03   c0t6d0    8.16    0.50      41     235    0.00    2.74
           c3t6d0    1.02    0.50      31     182    0.00    0.50
          c18t0d2  100.00   31.08    1790    9873   17.96    4.54
          c18t0d1  100.00   33.68    2537   18992   13.83    3.17
10:51:04   c0t6d0    7.84    0.50      59     306    0.00    1.62
           c3t6d0    3.92    0.50      45     200    0.00    0.80
          c18t0d2   98.04   31.18    1590    9365   19.55    4.91
          c18t0d1   98.04   43.24    2487   18298   17.91    3.16
10:51:05   c0t6d0    3.00    0.50      15      74    0.00    2.37
          c18t0d2  100.00   31.41    1660    9520   19.35    4.80
          c18t0d1  100.00   40.05    2525   17844   16.66    3.16
sxdb3-/opt/informix/etc> iostat 1 10000

  device    bps     sps    msps  

  c0t6d0      0     0.0     1.0  
  c3t6d0      0     0.0     1.0  
c10t0d1      0     0.0     1.0  
c10t0d2      0     0.0     1.0  
  c6t0d0      0     0.0     1.0  
  c6t0d3      0     0.0     1.0  
  c6t0d4      0     0.0     1.0  
c18t0d4      0     0.0     1.0  
c18t0d2      0     0.0     1.0  
c18t0d1      0     0.0     1.0  
c18t0d0      0     0.0     1.0  
c18t0d5      0     0.0     1.0  
c11t0d1      0     0.0     1.0  

  c0t6d0     65    16.7     1.0  
  c3t6d0     47    10.8     1.0  
c10t0d1      0     0.0     1.0  
c10t0d2      0     0.0     1.0  
  c6t0d0      0     0.0     1.0  
  c6t0d3      0     0.0     1.0  
  c6t0d4      0     0.0     1.0  
c18t0d4      0     0.0     1.0  
c18t0d2    4053    1683.3     1.0  
c18t0d1    8563    2533.3     1.0  
c18t0d0      0     0.0     1.0  
c18t0d5      0     0.0     1.0  
c11t0d1      0     0.0     1.0  

  c0t6d0    209    43.1     1.0  
  c3t6d0    189    33.3     1.0  
c10t0d1      0     0.0     1.0  
c10t0d2      0     0.0     1.0  
  c6t0d0      0     0.0     1.0  
  c6t0d3      0     0.0     1.0  
  c6t0d4      0     0.0     1.0  
c18t0d4      0     0.0     1.0  
c18t0d2    4329    1701.0     1.0  
c18t0d1    8222    2572.5     1.0  
c18t0d0      0     0.0     1.0  
c18t0d5     24     2.9     1.0  
c11t0d1      0     0.0     1.0  

  c0t6d0     24    13.9     1.0  
  c3t6d0     20    11.9     1.0  
c10t0d1      0     0.0     1.0  
c10t0d2      0     0.0     1.0  
  c6t0d0      0     0.0     1.0  
  c6t0d3      0     0.0     1.0  
  c6t0d4      0     0.0     1.0  
c18t0d4      0     0.0     1.0  
c18t0d2    4450    1777.2     1.0  
c18t0d1    8875    2637.6     1.0  
c18t0d0      0     0.0     1.0  
c18t0d5      2     1.0     1.0  
c11t0d1      0     0.0     1.0  

  c0t6d0     36     9.9     1.0  
  c3t6d0     32     7.9     1.0  
c10t0d1      0     0.0     1.0  
c10t0d2      0     0.0     1.0  
  c6t0d0      0     0.0     1.0  
  c6t0d3      0     0.0     1.0  
  c6t0d4      0     0.0     1.0  
c18t0d4      4     1.0     1.0  
c18t0d2    4459    1725.7     1.0  
c18t0d1    9345    2747.5     1.0  
c18t0d0      0     0.0     1.0  
c18t0d5      0     0.0     1.0  
c11t0d1      0     0.0     1.0  

  c0t6d0    101    16.2     1.0  
  c3t6d0     97    14.1     1.0  
c10t0d1      0     0.0     1.0  
c10t0d2      0     0.0     1.0  
  c6t0d0      0     0.0     1.0  
  c6t0d3      0     0.0     1.0  
  c6t0d4      0     0.0     1.0  
c18t0d4      0     0.0     1.0  
c18t0d2    4648    1807.1     1.0  
c18t0d1    9101    2770.7     1.0  
c18t0d0      0     0.0     1.0  
c18t0d5      0     0.0     1.0  
c11t0d1      0     0.0     1.0  

  c0t6d0      0     0.0     1.0  
  c3t6d0      0     0.0     1.0  
c10t0d1      0     0.0     1.0  
c10t0d2      0     0.0     1.0  
  c6t0d0      0     0.0     1.0  
  c6t0d3      0     0.0     1.0  
  c6t0d4      0     0.0     1.0  
c18t0d4      0     0.0     1.0  
c18t0d2    4843    1686.3     1.0  
c18t0d1    7788    2326.5     1.0  
c18t0d0      0     0.0     1.0  
c18t0d5      0     0.0     1.0  
c11t0d1      0     0.0     1.0  

  c0t6d0     16     5.0     1.0  
  c3t6d0     12     3.0     1.0  
c10t0d1      0     0.0     1.0  
c10t0d2      0     0.0     1.0  
  c6t0d0      0     0.0     1.0  
  c6t0d3      0     0.0     1.0  
  c6t0d4      0     0.0     1.0  
c18t0d4      0     0.0     1.0  
c18t0d2    4099    1682.2     1.0  
c18t0d1    8679    2551.5     1.0  
c18t0d0      0     0.0     1.0  
c18t0d5      0     0.0     1.0  
c11t0d1      0     0.0     1.0  

  c0t6d0    101    52.0     1.0  
  c3t6d0     79    45.1     1.0  
c10t0d1      0     0.0     1.0  
c10t0d2      0     0.0     1.0  
  c6t0d0      0     0.0     1.0  
  c6t0d3      0     0.0     1.0  
  c6t0d4      0     0.0     1.0  
c18t0d4      4     1.0     1.0  
c18t0d2    5327    1605.9     1.0  
c18t0d1    8637    2492.2     1.0  
c18t0d0      0     0.0     1.0  
c18t0d5      4     1.0     1.0  
c11t0d1      0     0.0     1.0  

sxdb3-/opt/informix/etc>

上面跑的informix的数据库，大家帮忙分析一下，io瓶颈在哪里？

zdz000

大虾们。帮忙看看啊！

sunraychuang

informax不大熟悉，不过还是先把硬件配置跟逻辑拓扑图贴出来

liaosnet

输出informix相关信息看下~~
onstat -g iof
onstat -g iob
onstat -p
等等~~不然实在没有办法说清楚?~~

zdz000

请大侠看一下，如果还需要什么信息，我随时网上贴，感谢！！！

liaosnet

6 npmchk           12876987 10842172  2034815 397.1
  7 npmchk_a          9505144  9059750   445394 293.2

从chunk io上看主要集中于这两个chunk上(估计这两个chunk都分布于c18t0d2,c18t0d1这两个磁盘上)...数据库性能上倒是没有什么大问题....
看一下你的系统能否再增加些BUFFERS,如果不能,那你可能要检查下在这两个chunk上的表使用情况了,关注过多的表操作带来影响.也就是业务逻辑上看看有没有办法..

iops

1. 解决性能慢的问题，需要时间的性能监控，同时配合实际的应用的情形，才可以找出瓶颈。
2。 你的存储型号和配置是什么？
3。 系统慢的时间段，维持多久时间？

chaiyongming

哥们检查一下I/O值偏高的那2块硬盘,说不上是硬盘坏了.我这边也是 IO高,最后查不来是硬盘坏了,要更换硬盘.  最好查查syslong ,swapinfo -atm ,  kmtune 中swap*  把这些收集一下贴上来