重复数据删除和数据压缩技术将为主存储节约空间

日期: 2010-01-13 作者:Carol Sliwa翻译:Michael Zhang 来源:TechTarget中国 英文

虽然没有备份上应用的重复数据删除技术火热,但拥有重复数据删除技术和数据压缩两项技术的主存储数据压缩技术,也随着广泛散播开的不同用于数据压缩的产品而越来越受欢迎。 那些致力于这项技术的公司为问题的解决提供了各种各样的渠道来定位。比如说,一个做主存储重复数据删除技术的公司在文件级别的消重上做研究,然而其他的一些公司却更关注于颗粒度,他们通过比较数据块或者比特流再或者是固定和变量的大小来研究消重的技术。有些进行重复数据删除是post-process的,也就是说在重复数据删除开始之前先将写数据缓存起来。

也有的数据压缩专家会采用数据路径下的inline消重方式来解决问题。 NetApp的基于数据块的重复……

我们一直都在努力坚持原创.......请不要一声不吭,就悄悄拿走。

我原创,你原创,我们的内容世界才会更加精彩!

【所有原创内容版权均属TechTarget,欢迎大家转发分享。但未经授权,严禁任何媒体(平面媒体、网络媒体、自媒体等)以及微信公众号复制、转载、摘编或以其他方式进行使用。】

微信公众号

TechTarget微信公众号二维码

TechTarget

官方微博

TechTarget中国官方微博二维码

TechTarget中国

电子邮件地址不会被公开。 必填项已用*标注

敬请读者发表评论,本站保留删除与本文无关和不雅评论的权力。

虽然没有备份上应用的重复数据删除技术火热,但拥有重复数据删除技术和数据压缩两项技术的主存储数据压缩技术,也随着广泛散播开的不同用于数据压缩的产品而越来越受欢迎。

那些致力于这项技术的公司为问题的解决提供了各种各样的渠道来定位。比如说,一个做主存储重复数据删除技术的公司在文件级别的消重上做研究,然而其他的一些公司却更关注于颗粒度,他们通过比较数据块或者比特流再或者是固定和变量的大小来研究消重的技术。有些进行重复数据删除是post-process的,也就是说在重复数据删除开始之前先将写数据缓存起来。也有的数据压缩专家会采用数据路径下的inline消重方式来解决问题。

NetApp的基于数据块的重复数据删除技术最显著和突出采用应用是在主存储上。公司层面表示,自从产品2007发布以来,已经有超过8000个用户已经注册了这项免费的重复数据删除技术的license。

作为NetApp的竞争对手,EMC公司随后也在2009年初进军主存储重复数据删除领域。他们的Celerra上的重复数据删除,将会在文件级别重复数据删除之前实现数据压缩。

Ocarina Networks公司同时也采用了数据压缩和消重技术,但不同于EMC的是,Ocarina的ECOsystem是第一个可以解压基于文件的数据,再在压缩前进行基于变量或者数据块的重复数据删除的系统。

Storwize公司也加入到这个行列里,他们的产品仅能够提供数据压缩服务。Storwize的CEO,Ed Walsh认为,主存储并不是重复数据删除实施的合适位置。

Wlash作为Avamar公司(一家致力于重复数据删除备份软件的公司,于2006被EMC收购) 之前的CEO,他认为,“我们消除的只是那些冗余的数据,而这些数据在主存储上并不应该存在,因为在备份的时候应该已经被清除掉了。”

更多的主存储上重复数据删除技术的产品

仍然有一些行业分析师期待有更多的厂商将他们的关注点放在倾向在主存储消重技术上。比如说,Permabit Technologies,他们提供了一款inline,基于sub-file的重复数据删除产品。这款产品的定位是用于归档,但有不少的客户将它们用在了主存储重复数据删除上。Sun公司最近也在他们的ZFS文件系统里内嵌了重复数据删除技术,这样其他的一些使用ZFS这项开源技术的厂商也愿意去开拓这个产品。

ESG高级分析师Lauren Whitehouse认为,“也许今天你能看到市场上可以提供解决方案的厂商在五年后也许就不再是他们,但这并不是他们都不存在了,而是我认为,他们不会成为行业的先驱。很有可能的是那些应用厂商或者操作系统厂商成为解决方案的提供者,因为他们更接近于数据本身的创建,数据的存储以及数据上策略的定义等。”

Gartner的存储技术策略研究总监Valdis Filks说他期望在2010年,能看到有两到三家或者更多的厂商可以提供不同的主存储上的重复数据删除产品,而在后面的2011年他希望有更多这样的厂商出现。他预言,到了2012年,主存储上的重复数据删除技术将非常的普遍。

Filks说,“有些时候,我们总会说一项技术会引导一个行业的革命,不管这是一个比喻或者从技术本身上说,主存储上的重复数据删除技术一定可以做到。我们习惯于将数据备份到重复数据删除设备上,然后在那进行操作。如果所有的消重都是在源端开始的,那我相信那些在后端做重复数据删除的厂商一定会遇到不少麻烦,他们一定会说抵制市场发展的话,比如在主存储上做重复数据删除是不正确的。”

Filks也说,那些有良好的软件,带有文件系统和智能数据块架构的现代设计,并且有能力将海量数据存储到单个数据块的存储设备,将是最合适做主存储重复数据删除的产品。性能问题将会随着多核高速的处理器,低廉价格的内存用作缓存,以及固态硬盘的整合而迎刃而解。

“和之前相比,设计者已经在存储设备里提供了成本范围内的性能加速组件。”Filks说。

同时,绝大多数的终端用户一直以来习惯于不推广重复数据删除技术在主存储上的应用。

“人们觉得买更多的磁盘也不是太大的问题,”StorageIO集团的创始人及高级分析师Greg Schulz评论道,“人们理解也意识到他们可以归档,将数据从数据块,电子邮件或者文件系统中抽出来,然后备份到一个重复数据删除的磁盘或者一个压缩的磁带上。

主存储重复数据删除如何工作

了解当前主存储重复数据删除产品分别是如何工作的并且了解他们各自的卖点,可以帮助IT部门决定是否这些技术可以帮助他们来抑制存储空间的增长。

“那些做基于sub-file重复数据删除技术的厂商将需要跨越更大的障碍,因为他们必须承诺他们的产品不会影响主存储上的使用性能。” Taneja 集团的高级分析师及可行性服务部总监Jeff Boles说道。

作者

Carol Sliwa
Carol Sliwa

资深编辑、作者

相关推荐