如何格式化存储硬盘最合适？

dhm007

如果一个vg里有三种不同的pv，则在建立lv时，硬盘的性能怎么处理？
如
PV1：SATAII 7200 1TB, raid5（9块盘）； 50GB；lun32-》 /dev/emcpowera
PV2：FC 15K 300G,       raid5（6块盘）； 50GB；lun 31-》 /dev/emcpowerb
PV3：FC 15K 300G,      raid10（8块盘）；50GB；lun 30-》 /dev/emcpowerc

建立40G的lv01、70G的lv02、39G的lv03，三个lv的读写性能一致吗？

[root@mailback01 host0]# pvs
  PV             VG    Fmt  Attr PSize  PFree  
  /dev/emcpowera emcvg lvm2 a-   49.88G 640.00M
  /dev/emcpowerb emcvg lvm2 a-   49.88G      0
  /dev/emcpowerc emcvg lvm2 a-   49.88G      0

通过测试一个160MB的文件，结果:
lv01的平均速度3.67MB/S;
lv02的平均速度2.28MB/S
lv03的平均速度3.48MB/S

从pvs的结果来看，lv01应该分布在/dev/emcpowerc，lv02应该分布在三个3个pv上，lv03应该分布在/dev/emcpowera；
由于lv02横跨三个不同类型pv，所以写性能最差，而FC 15K raid10和SATA raid5的写性能则相差不大；

dhm007

以上lv的划分分析不知是否正确？有没有命令可以看到lv来源哪些pv？

dhm007

通过dd测试：
1、测试纯写速度
[root@mailback01 /]# time dd if=/dev/zero of=/emcv1/test bs=8k count=500000
500000+0 records in
500000+0 records out

real    0m34.679s
user    0m0.377s
sys     0m12.897s


2、测试纯读速度
[root@mailback01 /]# time dd if=/emcv1/test of=/dev/null bs=8k
500000+0 records in
500000+0 records out

real    0m3.385s
user    0m0.341s
sys     0m3.043s

3、测试读写速度
[root@mailback01 /]# time dd if=/emcv1/test of=/emcv1/test2 bs=8k
500000+0 records in
500000+0 records out

real    0m37.442s
user    0m0.453s
sys     0m15.634s
--------------------------------------------------------------------------------
1、测试纯写速度
[root@mailback01 /]# time dd if=/dev/zero of=/emcv2/test bs=8k count=500000
500000+0 records in
500000+0 records out

real    0m22.241s
user    0m0.360s
sys     0m13.292s

2、测试纯读速度
[root@mailback01 /]# time dd if=/emcv2/test of=/dev/null bs=8k
500000+0 records in
500000+0 records out

real    0m3.392s
user    0m0.318s
sys     0m3.074s

3、测试读写速度
[root@mailback01 /]# time dd if=/emcv2/test of=/emcv2/test2 bs=8k
500000+0 records in
500000+0 records out

real    0m21.567s
user    0m0.404s
sys     0m15.217s
--------------------------------------------------------------------------------
1、测试纯写速度
[root@mailback01 /]# time dd if=/dev/zero of=/emcv3/test bs=8k count=500000
500000+0 records in
500000+0 records out

real    0m19.550s
user    0m0.382s
sys     0m13.592s


2、测试纯读速度
[root@mailback01 /]# time dd if=/emcv3/test of=/dev/null bs=8k
500000+0 records in
500000+0 records out

real    0m3.385s
user    0m0.353s
sys     0m3.032s

3、测试读写速度
[root@mailback01 /]# time dd if=/emcv3/test of=/emcv3/test2 bs=8k
500000+0 records in
500000+0 records out

real    0m22.294s
user    0m0.392s
sys     0m15.235s

q1208c

回复 13# dhm007

这三个分区是啥类型的没说明呀 ...
   

dhm007

从上面的结果来看，三个lv的读都差不多，但纯写和读写就有较大差别，其中lv02、lv03比较好，lv01比较差；
但从外部ftp文件，lv01和lv03比较好，lv02比较差。从ftp的速度比较，才认为lv01位于FC raid10上，lv03位于SATA raid5上
--------------------------------------
通过测试ftp一个160MB的文件，结果:
lv01的平均速度3.67MB/S;
lv02的平均速度2.28MB/S
lv03的平均速度3.48MB/S
--------------------------------------
如果lv01位于FC raid10上，lv03位于SATA raid5上，则从dd角度来讲，说明SATA raid5的写性能比FC raid10好，这和通常的说法不一样啊！

dhm007

回复 14# q1208c


   将3个pv组成1个vg，3个分区的格式都是ext3

q1208c

回复 15# dhm007


RAID10 和 RAID5 的性能评估, 要看你的 硬盘数量的. 不是说 RAID10 就一定好.

如果 RAID10 只有四块盘, 那其实相当于2块盘并行, 性能应该比2块盘的RAID0略差一点点或者相同.

而RAID5 如果硬盘够多, 比如 4块盘的RAID5, 在数据上, 相当于 3块盘并行, 应该比 3块盘的 RAID0差, 但应该好于 2块盘的 RAID0.

楼主如果有条件, 可以再详细测试一下. 配置不同的 RAID级别和盘数.

phanx

回复 12# dhm007

1. lvdisplay -m /dev/name_of_vg/name_of_lv

复制代码

你创建lv的时候应该指定创建在哪一个PV上，这样才清楚

1. lvcreate -n name_of_lv -LxxG name_of_vg /dev/emcpowerX

复制代码

dhm007

目前存储上是raid10有8块fc 15k的300g，一个raid5有9块sataii 7200的1tb硬盘，数量接近，单块硬盘性能来讲，fc应该比sata高不少吧。

phanx

回复 13# dhm007


    dd测试最好用direct模式

1. time dd if=/dev/zero of=/emcv1/test  oflag=direct bs=8k count=500000

复制代码