princeduan 发表于 2013-12-17 10:47

秀一下我们生产环境数据备份情况。

生产环境中数据的存储情况(使用带有重复数据删除、压缩功能的磁盘备份)。
请看红色部分

容量    24TB
系统空间    4.2TB (17.5%)
数据空间    178.5GB (0.7%)
奇偶校验&Meta数据空间   97.4GB (0.4%)
剩余空间    19.5TB (81.4%)
存储数据量    7.3TB
压缩率    40.7:1

如果没有重复数据删除功能,需要空间——存储数据量 7.3TB;
因为重复数据删除功能实际占用空间——数据空间 178.5GB。
压缩率为7.3TB/178.5GB=40.7

感觉很爽!

hachikoopenres 发表于 2013-12-17 10:57

行外人,没看懂

princeduan 发表于 2013-12-17 11:03

回复 2# hachikoopenres


原理很简单,就是磁盘集成了软件功能。
在数据写入磁盘之前,进行分析并删除重复数据块(只保留不重复的数据块),
并进行物理压缩后再写入。从而达到节省磁盘空间的目的。

hachikoopenres 发表于 2013-12-17 11:11

princeduan 发表于 2013-12-17 11:03 static/image/common/back.gif
回复 2# hachikoopenres




嗯,这样应该可以减少很多数据冗余了

princeduan 发表于 2013-12-17 11:16

回复 4# hachikoopenres

是的,就我现在这个情况,相当于给我节省了7TB多的存储空间。
太适合我们了,心情那叫一个爽啊!:em10:

dengbao2001 发表于 2013-12-17 15:47

重复数据删除是比较有用,不过是软件的,对电脑要求蛮高的

princeduan 发表于 2013-12-17 16:10

回复 6# dengbao2001

你说的是采用在业务服务器端进行重复数据删除技术的情况,
我说的这个是在数据传输到磁盘存储端,写入磁盘前进行重复数据删除。
所以,没有你说的顾虑。同时,因为在写入前进行重复数据删除,可以更有效的节省磁盘空间。

dengbao2001 发表于 2013-12-18 14:43

重复数据删除可以用在客户端做,不过这样对客户端压力蛮大的,所以没考虑这种方案

dengbao2001 发表于 2013-12-18 14:44

重复数据删除可以用在客户端做,不过这样对客户端压力蛮大的,所以没考虑这种方案

princeduan 发表于 2013-12-18 14:58

不太明白你说的方式。你说的是以下哪种方式?
我感觉Inline还是比较好的。

InLine方式:在数据要写入的时候进行重复删除。(上面我提到的)
缺点:备份的时候负荷集中在存储器端

PreProcess方式:在业务系统安装Agent,对数据进行重复删除后,把数据传输到存储端。
缺点:需要答复改动现有备份环境,需要考虑对业务系统的负荷。

PostProcess方式:数据不经过任何重复删除或者压缩,保存到存储器后,再进行重复删除。
缺点:需要很多不必要的磁盘空间。需要考虑备份时间和重复数据删除时间。
页: [1] 2 3 4
查看完整版本: 秀一下我们生产环境数据备份情况。