浅谈CH-DRS多层重复数据删除技术

chnod

无牙版主，我们技术在原来的基础上做了些补充，你看一下是否能够看明白CH-DRS多层重复数据删除的表现方式，如下是链接：

www.chnod.com/doc/chdrs3.htm

无牙

对传输过程的去重方式有些疑问。

如果源端文件的内容顺序是：1,2,a,b,b,a,1,2

请问传输后存储池中的内容是：1,2,a,b,b,a,1,2 还是1,2,a,b ?

chnod

这个方式是参考TCP/IP广域网加速的功能的，也就是说在传输的时候，所有的文件如果都含有1,2这个字节，那么1,2这2个字节就不传送了，而该变量a,b这2个字节在2边都没有，那么就只传输a,  b这2个字节，如果在存储池端之前已经包含A，那么就只传输B了。

这个传输方式是不以文件或者来考虑传输内容，而是以块或者字节的方式来校验传输的内容。

chnod

传输后的文件为1,2，a,b,并且在存储池里表现的是唯一的一个文件名

chnod

很多去重方式是每个LUN里做去重，不同的LUN的内容之间是不能做去重的。

CH-DRS的去重为所有的存储池、镜像池、快照池、复制池等均为统一管理，这样我们就可以对众多的数据做统一的去重，而且保留唯一的文档。因此，比很多去重产品更有优势，节省更多的空间，占用更少的主机资源。

ry715

不知道你们这种源端的重删和别家有什么不同吗，全局的源端重删，现在不是很多家也都可以做了吗

无牙

他这种多重数据删除其实是后端的。

从客户端到存储池是类似网络加速，后端是重复删除，是全局的。现在后端删除的基本上都是全局的。

doging

后端删除能不能理解为硬件压缩呢?

chnod

区别有：
1、源
其他源去重是基于卷的块级去重，块级的方式为数据先写入源磁盘，然后再读出来进行HASH，在做去重校对，然后再传输，这样需要占用很多的主机资源，包括CPU、内存等
CH-DRS是基于I/O的数据读取，并且是根据字节改变量传输，不改变不传输，且此功能是不经过源磁盘的，直接经过I/O总线方式向端传输，也就是在写入源磁盘的同时，也在向端写入。

块级最小的量级应该是K，而字节为Byte

2、传输过程中
采用TCP/IP压缩及加速技术，也就两边相同的块不传输，此不分文档，只是看数据的重复块的大小

3、端
其他源去重方式基于存储的LUN，相互的LUN之间的文件没有比较

CH-DRS的端去重特点是，所有的数据均在一个存储池中管理，相同版本相同数据之间只保留一个版本

michael1983

进来学习