AIX hdisk2 busy 100%(DS4300)

jacky000_lin

# iostat –d hdisk3 1 10
iostat: 0551-154 Disk –d is not found.
iostat: 0551-154 Disk hdisk3 is not found.

System configuration: lcpu=8 drives=6 paths=2 vdisks=0

tty:      tin         tout    avg-cpu: % user % sys % idle % iowait
          0.0         58.0               25.7   3.7   32.9     37.7

Disks:        % tm_act     Kbps      tps    Kb_read   Kb_wrtn
hdisk1           0.0       0.0       0.0          0         0
hdisk0           1.0       4.0       1.0          4         0
dac0             0.0     8328.0     1011.0       8328         0
dac0utm          0.0       0.0       0.0          0         0
hdisk2         101.0     8328.0     1011.0       8328         0
cd0              0.0       0.0       0.0          0         0

tty:      tin         tout    avg-cpu: % user % sys % idle % iowait
          0.0        1364.5               33.0   3.3   28.9     34.8

Disks:        % tm_act     Kbps      tps    Kb_read   Kb_wrtn
hdisk1           0.0       0.0       0.0          0         0
hdisk0           2.0      40.3       5.0          4        36
dac0             0.0     6609.3     816.1       6568         0
dac0utm          0.0       0.0       0.0          0         0
hdisk2         100.6     6609.3     816.1       6568         0
cd0              0.0       0.0       0.0          0         0

tty:      tin         tout    avg-cpu: % user % sys % idle % iowait
          0.0        586.7               31.3   3.4   30.9     34.4

Disks:        % tm_act     Kbps      tps    Kb_read   Kb_wrtn
hdisk1           0.0       0.0       0.0          0         0
hdisk0           0.0      16.0       4.0          0        16
dac0             0.0     9411.8     902.1       9400         0
dac0utm          0.0       0.0       0.0          0         0
hdisk2         100.1     9411.8     902.1       9400         0
cd0              0.0       0.0       0.0          0         0

tty:      tin         tout    avg-cpu: % user % sys % idle % iowait
          0.0        1416.0               34.5   3.8   27.1     34.6

Disks:        % tm_act     Kbps      tps    Kb_read   Kb_wrtn
hdisk1           0.0       0.0       0.0          0         0
hdisk0           1.0      24.0       3.0         24         0
dac0             0.0     11476.0     982.0       8628      2848
dac0utm          0.0       0.0       0.0          0         0
hdisk2         100.0     11476.0     982.0       8628      2848
cd0              0.0       0.0       0.0          0         0

tty:      tin         tout    avg-cpu: % user % sys % idle % iowait
          0.0        592.4               23.2   3.0   35.0     38.9

Disks:        % tm_act     Kbps      tps    Kb_read   Kb_wrtn
hdisk1           0.0       0.0       0.0          0         0
hdisk0           1.0      24.2       3.0          0        24
dac0             0.0     7274.6     918.9       7220         0
dac0utm          0.0       0.0       0.0          0         0
hdisk2         100.8     7274.6     918.9       7220         0
cd0              0.0       0.0       0.0          0         0

tty:      tin         tout    avg-cpu: % user % sys % idle % iowait
          0.0        1382.1               31.5   3.6   30.0     34.8

Disks:        % tm_act     Kbps      tps    Kb_read   Kb_wrtn
hdisk1           0.0       0.0       0.0          0         0
hdisk0           0.0      16.1       4.0          4        12
dac0             0.0     7477.4     923.1       7412         0
dac0utm          0.0       0.0       0.0          0         0
hdisk2         100.9     7477.4     923.1       7412         0
cd0              0.0       0.0       0.0          0         0

tty:      tin         tout    avg-cpu: % user % sys % idle % iowait
          0.0        580.9               34.1   4.4   29.3     32.3

Disks:        % tm_act     Kbps      tps    Kb_read   Kb_wrtn
hdisk1           0.0       0.0       0.0          0         0
hdisk0           1.0       7.9       2.0          0         8
dac0             0.0     7994.1     889.2       8064         0
dac0utm          0.0       0.0       0.0          0         0
hdisk2          99.1     7994.1     889.2       8064         0
cd0              0.0       0.0       0.0          0         0

tty:      tin         tout    avg-cpu: % user % sys % idle % iowait
          0.0        1388.2               72.2   5.4    1.9     20.5

Disks:        % tm_act     Kbps      tps    Kb_read   Kb_wrtn
hdisk1           0.0       0.0       0.0          0         0
hdisk0           3.0      74.9       8.9          8        68
dac0             0.0     7680.8     858.1       7796         0
dac0utm          0.0       0.0       0.0          0         0
hdisk2          98.5     7680.8     858.1       7796         0
cd0              0.0       0.0       0.0          0         0

tty:      tin         tout    avg-cpu: % user % sys % idle % iowait
          0.0        586.0               64.8   5.5    1.9     27.8

Disks:        % tm_act     Kbps      tps    Kb_read   Kb_wrtn
hdisk1           0.0       0.0       0.0          0         0
hdisk0           4.0      60.0       8.0          8        52
dac0             0.0     11480.0     915.0      11472         8
dac0utm          0.0       0.0       0.0          0         0
hdisk2         100.0     11480.0     915.0      11472         8
cd0              0.0       0.0       0.0          0         0

tty:      tin         tout    avg-cpu: % user % sys % idle % iowait
          0.0        1364.0               67.2   5.0    1.1     26.7

Disks:        % tm_act     Kbps      tps    Kb_read   Kb_wrtn
hdisk1           0.0       0.0       0.0          0         0
hdisk0           2.0      84.0       4.0          8        76
dac0             0.0     10632.0     934.0       9800       832
dac0utm          0.0       0.0       0.0          0         0
hdisk2         100.0     10632.0     934.0       9800       832
cd0              0.0       0.0       0.0          0         0

树袋熊

忙就忙呗.总不能不忙啊.80%的业余忙在20%的设备上不就符合20-80%的原理了吗?
你觉得你自己的系统有问题了吗?

树袋熊

不过和我的系统比你的是忙多了:
iostat

System configuration: lcpu=80 drives=126 paths=498 vdisks=0

tty:      tin         tout    avg-cpu: % user % sys % idle % iowait
          0.2         34.2               13.2   6.3   57.4     23.1

Disks:        % tm_act     Kbps      tps    Kb_read   Kb_wrtn
hdisk1          10.4     150.5      31.0   15855290  312758270
hdisk0          11.2     285.9      33.0   311677661  312756618
hdisk2           0.0       1.6       0.1     575830   3014389
hdisk139         8.0     319.6      67.8   23949030  674140094
hdisk22          8.9     227.2      53.7    2456902  493739641
hdisk141         0.0       0.0       0.0      62830         4
hdisk156         0.1      19.7       1.0   31588687  11333968
hdisk29          0.0       0.0       0.0      67171         4
hdisk24          0.0       0.0       0.0      62830         4
hdisk30          0.0       0.0       0.0      43303         0
hdisk31          0.0       0.0       0.0      62830         4
hdisk38          0.0       0.0       0.0      62830      3498
hdisk39          4.6     505.2      31.0   1012493895  90861416
hdisk7          22.9     1878.0      67.4   3982004261  119670444
hdisk32          0.0       0.0       0.0      62830         4
hdisk44         38.1     2831.3      96.4   5920201623  263400408
hdisk45         23.8     1467.4      50.5   3061215275  143685220
hdisk46         55.5     4345.9     167.4   9142516835  348970412
hdisk47         53.8     4515.1     177.2   9513662407  347267972
hdisk48         31.7     2770.6      90.9   5765264919  285792984
hdisk49         23.2     1361.1      49.8   2816889599  155827104
hdisk50         54.4     4503.8     177.3   9477046971  359366456
hdisk8          20.9     1827.0      80.0   3835367239  154899300
hdisk40          3.4     403.4      11.1   857682607  23295840
hdisk51         33.0     2847.1      92.7   5976440391  241653596
hdisk28          0.1       3.9       0.6     377493   8183840
hdisk136         2.7     113.2      22.6   15288798  232012514
hdisk135         0.1      17.7       0.5    7328894  31401993
hdisk52         24.2     1458.1      53.0   2958917987  225523692
hdisk152         0.3       1.7       3.4    1730807   1971758
hdisk55         24.6     1456.5      53.0   2955536935  225510292
hdisk53         55.4     4509.3     177.5   9487617915  360715972
hdisk56         55.1     4765.3     176.1   10060651017  346789908
hdisk54         33.8     2853.4      93.0   5989443631  242463788
hdisk57         34.0     2931.2      93.0   6190410607  211272580
hdisk58         25.6     1502.4      55.2   3042468403  238812672
hdisk59         55.3     4480.6     175.6   9438625783  347062376
hdisk9          20.6     1760.4      77.1   3717556607  127192004
hdisk41          3.3     368.4       9.7   772818332  31708896
hdisk60         34.0     2928.3      92.9   6184123967  211221988
hdisk61         25.6     1504.4      55.3   3045914215  239706168
hdisk62          0.3     134.2       7.3   135315939  157725360
hdisk64          2.1     442.2      54.3   472059007  493739641
hdisk11         20.3     1775.6      76.5   3754656531  123204260
hdisk12         20.4     1705.0      60.6   3649215713  74587240
hdisk43          4.0     468.6      29.0   927440331  95978584
hdisk13         20.4     1719.0      61.4   3679295023  75016576
hdisk42          3.3     368.3       9.7   773196391  31119856
hdisk110        21.5     1720.2      52.3   3686281763  70608016
hdisk63          4.0     467.0      28.8   925708155  94210556
hdisk111        36.2     4188.2     115.7   9096388211  50652860
hdisk112        20.8     1704.3      51.6   3656126915  66142768
hdisk114        16.2     1326.6      40.8   2847599619  49650412
hdisk115        39.3     4622.6     128.8   10013792023  82107768
hdisk113        35.9     4341.4     122.2   9390827043  90869456
hdisk117        39.8     4627.0     129.0   10024508379  80832268
hdisk116        16.5     1332.3      41.1   2859671815  50000296
hdisk118        16.3     1338.0      41.1   2872830559  49399468
hdisk120        16.1     1339.7      41.1   2876858307  49167584
hdisk121        38.5     4491.7     126.6   9705726079  104266216
hdisk119        38.8     4482.0     126.4   9684558408  104106348
hdisk143         0.0       0.0       0.0      46215         0
hdisk144         0.0      18.1       0.5    8031198  31401993
hdisk145         0.8     120.3      23.6   30690818  232012514
hdisk155         0.1       1.7       3.4    1747360   1970435
hdisk33          0.0     173.3       1.0   370323187   8183840
hdisk153         2.4     644.4      64.6   10422678  1397012016
hdisk3           0.0       2.0       0.2    1419350   3014389
hdisk66         55.2     4470.5     175.0   9420095063  343510544
hdisk15         21.0     1732.0      66.7   3707707731  75096580
hdisk65          0.3     362.4       6.6   725323944  66071512
hdisk85          4.0     462.9      28.2   917179143  93718960
hdisk67         34.0     2929.7      92.9   6187193051  211241896
hdisk68         25.7     1508.3      55.4   3055204603  239010512
hdisk69         53.6     4474.0     175.4   9426213903  345109320
hdisk70         32.5     2932.5      93.0   6191879295  212691948
hdisk72         54.4     4503.3     177.2   9477004063  358351820
hdisk71         24.8     1504.3      55.3   3046504895  238882948
hdisk73         33.1     3136.1      93.5   6607344569  241893388
hdisk74         24.3     1455.6      52.9   2953443499  225651040
hdisk16         19.8     1697.0      62.1   3631384923  74871328
hdisk86          3.8     463.4      27.9   917691987  94345392
hdisk75         55.3     4503.4     177.0   9476982959  358495236
hdisk76         33.8     2850.5      92.7   5984268683  241204980
hdisk78         55.4     4503.8     177.2   9476553567  359848588
hdisk77         24.7     1460.2      53.1   2964203291  224943440
hdisk79         33.9     2852.6      93.0   5988266867  241911284
hdisk80         24.6     1457.2      53.0   2957017747  225453344
hdisk81         55.3     4501.5     177.1   9473162643  358120848
hdisk17         20.9     1757.9      78.4   3712087997  127266460
hdisk87          3.5     371.6       9.8   779449307  32025088
hdisk82         33.7     2849.3      92.8   5980156931  242704264
hdisk84          0.3      70.2       6.7    1201946  152142936
hdisk83         24.5     1447.0      52.7   2935183095  225011852
hdisk19         20.4     1755.5      76.2   3705725739  128395944
hdisk88          3.3     369.5       9.8   774979639  32062736
hdisk89          3.3     368.0       9.7   771816327  31795248
hdisk21         20.4     1774.0      80.1   3741387731  132982040
hdisk90          3.3     369.1       9.8   774028315  32194848
hdisk20         20.4     1767.4      79.7   3728551367  131446728
hdisk123        38.8     4487.5     126.5   9697847395  103019488
hdisk124        15.2     1335.2      40.9   2867021687  49092524
hdisk125        36.7     4494.1     126.6   9712862287  102219140
hdisk126        16.3     1329.5      41.0   2853634535  50041640
hdisk127        39.1     4628.5     129.0   10026454543  82192840
hdisk128        16.1     1328.0      40.9   2850833151  49574256
hdisk129        39.4     4625.5     129.0   10019762063  82340852
hdisk132        16.4     1332.8      41.1   2861235759  49544348
hdisk131        39.3     4626.9     129.0   10022805508  82500276
hdisk130        16.1     1325.7      40.9   2845915447  49342284
hdisk148         2.1     331.1      69.0   48981334  674140094
hdisk149         0.1      39.9       1.6   67333277  19914672
hdisk154         6.9     1848.1     184.5   32220747  4004156864
hdisk133        39.5     4628.4     129.0   10026402343  82057096
hdisk122        16.1     1336.3      41.1   2869458487  49022636
hdisk157         0.0       5.7       0.9    1025900  11333968
hdisk34          0.0       0.0       0.0      62830         4
hdisk25          0.0       0.0       0.0      62830         4
hdisk150         0.0       0.0       0.0      62830         4
hdisk91          0.0       0.0       0.0      43935         0
hdisk26          0.4     112.9      10.7    1842706  244791356
hdisk37          0.0       0.0       0.0      62830         4
hdisk36          0.0       0.0       0.0      62830         4
hdisk27          0.4     112.2      10.7    2000330  243019296
hdisk92          0.0       0.0       0.0      63266      3498
hdisk35          0.0     101.6       0.3   221948368         0

树袋熊

你地机器是如何配置的?你这个硬盘上都有什么?还有这个盘是DS4300上来的吧?

慕鸿霄

到存储上检查看看

jacky000_lin

是在DS4300上的，如何能降下來,總不能都是100%吧?

慕鸿霄

你先到存储上看看，猜测是没有任何用途的。
现象有点像写缓存被禁用

RS9000

虽然% tm_act 使用100%，但你的kbps也不低，说明磁盘就是繁忙，读的数据量大。而且这种情况是一直存在还是 偶尔发生或者只是突然现在出现了，情况需要说明一下。再有楼上有人说了检查存储看是否存在故障，比如电池faied等。另外该磁盘上放置的是什么，太多的情况影响性能。单纯的iostat看不出什么。还可以用filemon监控一下。

yddll

4300单lun跑DB，估计性能也就差不多这些了
可能有优化的空间，但是不会太大了

yuxiao_zhao

4300上就划了一个lun？ 共多少块盘？ raid几？
如果raid上还有空间 再划第二个lun从dac1映射到服务器上 性能会好点