揭秘“去重”:基于硬件的重复数据删除技术

日期: 2009-11-09 作者:Stephen J. Bigelow翻译:郭镭 来源:TechTarget中国 英文

基于硬件的重复数据删除技术 基于硬件的重复数据删除有两种模式:in-band或out-of-band。in-band模式的特点是直接降低写入存储的数据量,它将“去重”和“写入”操作合并在一起执行,所以这种去重方法看起来很有效。但在实际的处理过称中,合并执行需要更多的系统资源,也可能导致备份时间有所延长。 Out-of-band模式是在数据写入存储空间之后再进行去重处理,这种方式的特点决定了它不会导致备份时间的延长,也不用过分担心备份服务器和存储系统的CPU资源会成为瓶颈。

不过,out-of-band模式在去重过程中会使用更多的磁盘空间,需要的时间也比单纯做备份更长。另外一个问题是磁盘争用,如果……

我们一直都在努力坚持原创.......请不要一声不吭,就悄悄拿走。

我原创,你原创,我们的内容世界才会更加精彩!

【所有原创内容版权均属TechTarget,欢迎大家转发分享。但未经授权,严禁任何媒体(平面媒体、网络媒体、自媒体等)以及微信公众号复制、转载、摘编或以其他方式进行使用。】

微信公众号

TechTarget微信公众号二维码

TechTarget

官方微博

TechTarget中国官方微博二维码

TechTarget中国

电子邮件地址不会被公开。 必填项已用*标注

敬请读者发表评论,本站保留删除与本文无关和不雅评论的权力。

基于硬件的重复数据删除技术

基于硬件的重复数据删除有两种模式:in-band或out-of-band。in-band模式的特点是直接降低写入存储的数据量,它将“去重”和“写入”操作合并在一起执行,所以这种去重方法看起来很有效。但在实际的处理过称中,合并执行需要更多的系统资源,也可能导致备份时间有所延长。

Out-of-band模式是在数据写入存储空间之后再进行去重处理,这种方式的特点决定了它不会导致备份时间的延长,也不用过分担心备份服务器和存储系统的CPU资源会成为瓶颈。不过,out-of-band模式在去重过程中会使用更多的磁盘空间,需要的时间也比单纯做备份更长。另外一个问题是磁盘争用,如果用户试图在去重处理期间访问存储设备,会感觉到性能有明显的降低。

基于硬件的重复数据删除不能像软件一样在源端去重以便节约网络带宽,但与基于软件的产品相比,硬件装置的压缩级别往往更高,实施和维护成本也较低。通常,基于硬件的数据去重装置代表着高性能、高可扩展性、以及更简单的部署方式。备份软件一般会把这类专用的硬件视为普通磁盘存储系统,完全不需要知道硬件内部如何进行数据的去重处理。

很多存储系统都集成了硬件去重。举例来说,VTL(虚拟磁带库)往往带有重复数据删除功能。与磁带介质相比,VTL借助磁盘的性能优势大幅提升了备份的速度,而有了去重功能之后,对磁盘容量的需求也降低到了更小的程度。目前,多数基于VTL的去重案例都采用了out-of-band模式,备份数据在VTL设备中做集中的去重处理,可以得到非常理想的去重比率。Out-of-band模式的缺点是不具有实时性,针对这一问题,一些VTL厂商在设备中还提供了in-band处理功能,即备份数据进入设备之后,立即开始做在线的去重处理。稍后,我们看看厂商的情况。

作者

Stephen J. Bigelow
Stephen J. Bigelow

数据中心和虚拟化网站的高级技术编辑,拥有20年的PC和技术写作经验。

相关推荐

  • 简单可靠的平面备份技术

    在过去,很少有人认为平面数据备份可以成为传统备份方式的靠谱的替代者。而到了现在,随着快照技术的不断增强,趋势正在改变。

  • 专家答疑:重复数据删除在云中是如何工作的?

    重复数据删除过程减少了存储系统中的数据量,但云中的重复数据删除可能比客户对云提供者更有价值。

  • 全闪数据中心的数据缩减攻略

    全闪存数据中心的概念之所以很吸引人,是因为它可以消除耗时的系统调优。它使数据中心得以支持最大的虚拟机密度,它的存储响应时间让大多数应用程序提供者都感到满意。

  • 存储采购并非易事

    硬盘市场的下滑并没有带来相应的固态存储市场的蓬勃发展,但固态存储将最终取代机械硬盘,在这一路上也会不断有惊喜。