【重复数据删除能被扶正吗】 删除重复数据

　　重复数据删除技术正欲走出数据归档、备份等二线应用，试图叩开主存储的大门。重复数据删除能否登堂入室？我认为前面的路并非一马平川。 　　ＮｅｔＡｐｐ在２月份声明将把重复数据删除技术集中到其主存储产品之中，同时也应用到二级存储产品中。
　　这是我所听过的第一家将重复数据删除技术应用到主存储的厂商。ＮｅｔＡｐｐ为什么要这么做？因为重复数据删除技术最近实在太抢手了。数周以来，ＥＭＣ与昆腾的合作传闻一直在业界流传；惠普也表示将在今年第二季度，把数据重复删除技术应用到其虚拟磁带柜（ＶＴＬ）中；ＨＤＳ最近也宣布将推出新的以重复数据删除功能为开路先锋的ＶＴＬ产品。如此激烈的竞争局面，正是ＮｅｔＡｐｐ扩大重复数据删除技术应用领域，扩展产品线的重要原因。
　　ＮｅｔＡｐｐ公司解决方案行销副总裁Ｐａｔｒｉｃｋ Ｒｏｇｅｒｓ表示，重复数据删除技术能够大幅度减少用户的存储规模。这点我们不能不承认，在技术上是完全可以做到的。但是，我还是要问一句：“这真的可行吗？”
　　在主存储中应用重复数据删除技术是否会影响存储效率？这也是用户对此最为关心的问题。它的确能够提供１０∶１，甚至３０∶１的超高压缩率，但无疑这是需要算法的。该算法（一般是哈希算法）需要判断一个将要处理的文件、块或比特是否和另一个文件、块或比特相同。当数据量十分庞大的时候，算法显然需要更多的处理时间，而且，随着重复数据删除进程越来越粒化，所检验的数据块也越来越小，哈希索引变得更加庞大，更加拖累了性能。在备份、归档应用中，相比处理速度，空间是更大的瓶颈，因此备份与重复数据删除相得益彰。但是在效率比空间更加重要的主存储中，重复数据删除或许显得有点“多事”。
　　一个更为根本的问题是：“在主存储中应用重复数据删除技术真的有必要吗？”从技术方面分析，正如Ｄａｔａ Ｄｏｍａｉｎ公司ＣＥＯ Ｆｒａｎｋ Ｓｌｏｏｔｍａｎ所坚持认为的，数据在主存储中由于经常改动，逗留时间较短，不足以从缩减空间中受益。
　　从用户的角度来看，应用重复数据删除技术的主存储产品的用户定位有些模糊不清。如果说定位于数据量庞大的高端用户，该产品确实能够降低存储量以节省开支，但这些高端用户要保证数据的安全性、高可靠性和存取的高速率，设备预算的数目必然不小，重复数据删除能够节省的成本或许根本就不被他们看在眼里。如果说该产品定位于欲节省成本的低端用户，而往往这些用户的数据量并不见得足够庞大，以致非要缩减存储容量不可。因此实际情况很可能是，在主存储中增加重复数据删除技术更像是画蛇添足。
　　也许，安静地待在备份、归档应用中，重复数据删除技术才更适得其所。