请教如何查看io瓶颈在哪里 ？

motes

我这里装了HP ultrium 460磁带机。按照官方介绍，传输速度达60M/s，2小时可备份400G数据。

我的 环境solaris8（sun v880），a1000阵列。用ufsdump备份，可以看到io最多只能在10M左右。a1000阵列是10块盘做的raid0+1。不知道瓶颈 在哪里，scsi卡会有影响吗 ？
root # iostat -xn 1 3
                    extended device statistics
    r/s    w/s   kr/s   kw/s wait actv wsvc_t asvc_t  %w  %b device
    1.1    1.9   12.5    6.9  0.0  0.0    3.8   13.3   1   2 d0
    0.0    0.1    0.2    0.7  0.0  0.0    0.3    7.1   0   0 d3
    0.1    0.0    0.5    0.1  0.0  0.0    0.0    6.3   0   0 d4
    0.5    1.9    6.3    6.9  0.0  0.0    0.0   12.7   0   2 d10
    0.5    1.9    6.3    6.9  0.0  0.0    0.0   11.5   0   2 d20
    0.0    0.1    0.1    0.7  0.0  0.0    0.0    6.1   0   0 d30
    0.0    0.1    0.1    0.7  0.0  0.0    0.0    5.8   0   0 d31
    0.0    0.0    0.0    0.0  0.0  0.0    0.0    0.0   0   0 c0t6d0
   38.3    9.8 3061.7   87.0  0.0  0.4    0.2    8.4   0  24 c3t5d2
    0.6    2.7    6.4    7.9  0.0  0.0    0.0   12.1   0   2 c1t1d0
    0.8    2.7    8.0    9.3  0.0  0.0    0.0   12.9   0   2 c1t0d0
    0.3   38.2   17.3 2425.6  0.0  0.0    0.0    1.2   0   5 rmt/0
                        extended device statistics
    r/s    w/s   kr/s   kw/s wait actv wsvc_t asvc_t  %w  %b device
    0.0    0.0    0.0    0.0  0.0  0.0    0.0    0.0   0   0 d0
    0.0    0.0    0.0    0.0  0.0  0.0    0.0    0.0   0   0 d3
    0.0    0.0    0.0    0.0  0.0  0.0    0.0    0.0   0   0 d4
    0.0    0.0    0.0    0.0  0.0  0.0    0.0    0.0   0   0 d10
    0.0    0.0    0.0    0.0  0.0  0.0    0.0    0.0   0   0 d20
    0.0    0.0    0.0    0.0  0.0  0.0    0.0    0.0   0   0 d30
    0.0    0.0    0.0    0.0  0.0  0.0    0.0    0.0   0   0 d31
    0.0    0.0    0.0    0.0  0.0  0.0    0.0    0.0   0   0 c0t6d0
1112.4    0.0 8899.3    0.0  0.0  2.8    0.0    2.6   0 100 c3t5d2
    0.0    0.0    0.0    0.0  0.0  0.0    0.0    0.0   0   0 c1t1d0
    0.0    0.0    0.0    0.0  0.0  0.0    0.0    0.0   0   0 c1t0d0
    0.0  274.9    0.0 8795.4  0.0  0.6    0.0    2.3   0  63 rmt/0
                        extended device statistics
    r/s    w/s   kr/s   kw/s wait actv wsvc_t asvc_t  %w  %b device
    0.0    0.0    0.0    0.0  0.0  0.0    0.0    0.0   0   0 d0
    0.0    0.0    0.0    0.0  0.0  0.0    0.0    0.0   0   0 d3
    0.0    0.0    0.0    0.0  0.0  0.0    0.0    0.0   0   0 d4
    0.0    0.0    0.0    0.0  0.0  0.0    0.0    0.0   0   0 d10
    0.0    0.0    0.0    0.0  0.0  0.0    0.0    0.0   0   0 d20
    0.0    0.0    0.0    0.0  0.0  0.0    0.0    0.0   0   0 d30
    0.0    0.0    0.0    0.0  0.0  0.0    0.0    0.0   0   0 d31
    0.0    0.0    0.0    0.0  0.0  0.0    0.0    0.0   0   0 c0t6d0
1222.0    0.0 9776.4    0.0  0.0  2.8    0.0    2.3   0 100 c3t5d2
    0.0    0.0    0.0    0.0  0.0  0.0    0.0    0.0   0   0 c1t1d0
    0.0    0.0    0.0    0.0  0.0  0.0    0.0    0.0   0   0 c1t0d0
    0.0  306.0    0.0 9792.4  0.0  0.7    0.0    2.3   0  70 rmt/0

请高手指点。

nhuczp

vmstat 2

chalylau

原帖由 nhuczp 于 2008-11-17 23:32 发表
vmstat 2

对，先看一下iowait严重否。

motes

vmstat 没看出什么来。

procs     memory            page            disk          faults      cpu
r b w   swap  free  re  mf pi po fr de sr m0 m3 m4 m1   in   sy   cs us sy id
0 0 0 4836200 669808 323 1616 5 66 67 0 2  3  0  0  2 2101  746 2102 42 11 47
0 0 0 4788832 514568 9 194 280 8  8  0  0  1 17  0  1  406 2757 1115  6  2 92
0 0 0 4788832 514552 0 1294 72 0  0  0  0  0  6  0  0  285 2220  948  6  2 92
zzz ***Thu Nov 13 10:50:49 CST 2008
procs     memory            page            disk          faults      cpu
r b w   swap  free  re  mf pi po fr de sr m0 m3 m4 m1   in   sy   cs us sy id
0 0 0 4836200 669808 323 1616 6 66 67 0 2  3  0  0  2 2101  747 2102 42 11 47
0 0 0 4788832 509032 188 1367 152 0 0 0 0  1  0  0  1  313 4445  954 13  1 86
0 1 0 4788832 509032 16 1349 952 0 0 0  0  0  1  0  0  368 3590 1519 15  1 83
zzz ***Thu Nov 13 10:52:51 CST 2008
procs     memory            page            disk          faults      cpu
r b w   swap  free  re  mf pi po fr de sr m0 m3 m4 m1   in   sy   cs us sy id
0 0 0 4836200 669808 323 1616 6 66 67 0 2  3  0  0  2 2101  747 2102 42 11 47
0 0 0 4788832 504792 0 233 144 0  0  0  0  0  2  0  0  277 1158  745  2  1 97
0 1 0 4788832 504792 5 287 456 0  0  0  0  0  0  0  0  377 1027  830  3  1 96

chalylau

最后一项wa呢？

motes

不好意思，我刚才发的是平时系统在线时的vmstat输出。

而昨晚发帖时，在用ufsdump备份。当时没有执行vmstat，只是用iostat看了一下。

iops

1. 你备份什么数据？官方的说法是依据不同的数据格式而定，不要轻易相信
2. 目前的备份用了多久的时间，希望多快可以结束！
3. 要找io瓶颈，建议试试ProMATO 1+7

ga0feng

我这里装了HP ultrium 460磁带机。按照官方介绍，传输速度达60M/s，2小时可备份400G数据。

我的 环境solaris8（sun v880），a1000阵列。用ufsdump备份，可以看到io最多只能在10M左右。a1000阵列是10块盘做的raid0+1。不知道瓶颈 在哪里，scsi卡会有影响吗 ？

>>>>>>>>>>>>>>>>>>>>>
俺来说说：
看下面的，很容易可以得出结论，磁带机每秒可以写9792K，因为从device c3t5d2上每秒就可以读出9776K。
                        extended device statistics
    r/s    w/s   kr/s   kw/s wait actv wsvc_t asvc_t  %w  %b device
1222.0    0.0 9776.4    0.0  0.0  2.8    0.0    2.3   0 100 c3t5d2
    0.0  306.0    0.0 9792.4  0.0  0.7    0.0    2.3   0  70 rmt/0

所以你的磁带机很快也没有用，因为硬盘很慢:p
对于你的这个环境来说，每秒读10M并不算太慢。

参照《oracle高可用环境》第74页的数据(硬盘的Throughput)，如果是10K rpm的硬盘，流量在10M/s；15K rpm的硬盘，13M/s.
考虑到使用了A1000后，有cache;并且作了raid0；流量应该可以更大点。
但是因为你备份是随机读，而不是连续读，所以流量又有降幅。

我只能说，10M/s是正常值。若要让他更快，要花很大力气。
可以让楼上的兄弟帮你有偿分析下

motes

谢谢iops和ga0feng的答复。

我发帖的时候，正在用ufsdump备份，应该是文件的备份。现在知道备份慢的原因了（因为当时比旧磁带机还慢1/3），是460磁带机没有配好设备，后来用boot -r重做的。现在用oracle Rman+dd，185G数据，3小时10分可备完。备份时io瞬时峰值可达30m左右，基本上在20m以上。

另外，备份应该是连续读吧，dd命令啊。

dahe_1984

不知道你用的什么备份软件，Legato可以直接备份内存中的数据，数据也是直接从内存中产生。