重复数据删除技术是现代备份系统中不可或缺的组成部分。通过删除冗余数据，重复数据删除技术可以为用户节省90%的数据，不仅在成本上带来了极大的优势，而且在存储管理上也为用户提供了便利。本文将着重为您介绍基于目标端重复数据删除产品。

在选择重复数据删除产品的时候，一个很重要的问题就是你将准备如何对您的数据进行消重处理。事实上能够实现的方法有很多，最终取决于您希望在哪个环节实现对数据消重，以及您更偏好于在硬件层进行消重还是软件层。因为不同用户所面对的情况不同，所以对这个问题没有一个唯一的答案。作为用户，需要仔细了解当前的系统以及你所预期的增长幅度，另外还有设备更换的周期以及其它因素，总而言之，就是希望能最大程度上满足业务上的需求。

基于目标端的重复数据删除技术实现的是备份数据流在备份源端和目标端传输的过程中将冗余数据删除。基于目标端是相对基于源端来说的，后者则是每个备份客户端上都安装了一个消重进程，这样在将备份数据传输到备份目标之前就能实现消重的目的。

基于目标端的重复数据删除设备代表了现代消重技术的高端领域。这些消重设备将被放置在网络和存储设备之间，并能提供高速、海量的消重功能。价格方面，根据配置不同，最基本的单元配置起步价大约为7000美元，普通的大约为25000美元，最贵的大约为250000美元。

为了方便消重数据，尤其是离线消重，几乎所有的这些设备都有和存储相结合，但又不是完全嵌入于设备。此外，许多消重设备还额外提供了冗余的风扇和可以支持热插拔的磁盘来提高可靠性。

目标端重复数据删除的特性

如果您追求的是较高的数据吞吐量，那我们建议您仔细了解厂商提供的规格说明。大多数厂商所提供的规格说明中的吞吐量都是最佳吞吐量，而并不是所有阵列吞吐量的平均值。

有关基于目标端消重设备的一个非常热门的特性就是他们使用了RAID6技术对数据进行保护。RAID6技术在RAID5技术的基础上再多增加了一块奇偶校验盘，这样就能在掉两块的情况下仍然可以重建数据，而根据消重设备本身的特性，第二块盘出故障是完全有可能的。在提高可靠性方面，除了使用RAID6技术另外对电源供应、风扇以及其他组件也都实现而来冗余。

源端消重技术和目标端消重技术的比对

与基于源端重复数据删除技术不同的是，前者是在笔记本端或者其他的源端实现对数据进行消重处理，网络传输的数据只是消重后的数据；而后者则是在存储目标端实现消重。这就要求相关设备能处理来自网络上的全部数据流量并把消重相关的所有工作都留给了相关设备。

一般来说，不管是源端或者是目标端的消重产品，它们之间的关联都很紧密，因为几乎做的是同一件事情。比如说，赛门铁克NetBackup 5000系列可以支持在源端或者目标端的消重，这对那些有远程办公室的企业来说尤其重要，因为他们可以在将数据传输到中心节点之前就完成消重处理，大大减轻了网络的负载。

在消重处理的过程中，用户可以选择使用在线消重或者离线消重两种不同的技术，前者是在数据写进存储设备的时候同时消重，后者则是先将数据存放到设备上，之后再进行消重处理。虽然重复数据删除是一项对吞吐量很高的技术，大多数用户表示他们在这方面的体验并不明显，和普通的备份软件相比，并未对服务器产生特别大的性能压力。一些厂商甚至可以在同一套设备上实现在线消重和离线消重两种技术供用户选择。

硬件上的消重技术知识重复数据删除领域上的一个范畴。现在大多数备份软件现在都会提供重复数据删除的功能选项，有的是在备份软件里，比如像CA公司的ARCserve或者CommVault，还有的是使用了另外的一个小插件，比如像Symantec公司的PureDisk。

基于软件的重复数据删除技术价格上相对低廉一些，至少在收购的时候所花费的成本更少，但和硬件消重相比，消重性能明显会更慢一些。具体会多慢取决于下层的硬件平台，软件的吞吐量以及网络链路的性能等。

在选择重复数据删除产品的时候，我们建议用户首先考虑切身需求，这就包括了估算的数据增长速度、预算以及所需要的特性。与备份软件、磁盘阵列或者虚拟带库的兼容性同样非常重要。最后一点，对厂商所提供的参数要仔细研究，尤其是有关吞吐量的描述。可能你实测的结果与描述会有不小的差异。

请参考：

在备份软件中使用重复数据删除：源端 vs.目标端重复数据删除

存储大讲堂：重复数据删除