聊聊重复数据删除技术

重复删除的定义

De-duplication，即重复数据删除，它是一种目前主流且非常热门的存储技术，可对存储容量进行有效优化。它通过删除数据中重复的数据，只保留其中一份，从而消除冗余数据。这种技术可以很大程度上减少对物理存储空间的需求，从而满足日益增长的数据存储需求。

重复删除的优势

重删技术目前大量应用于数据备份与归档系统，因为对数据进行多次备份后，存在大量重复数据，非常适合这种技术。事实上，重删技术可以用于很多场合，包括在线数据、近线数据、离线数据存储系统，可以在文件系统、卷管理器、NAS、SAN中实施。重删也可以用于数据容灾、数据传输与同步，作为一种数据压缩技术可用于数据打包。重删技术可以帮助众多应用降低数据存储量，节省网络带宽，提高存储效率、减小备份窗口，节省成本。

重删对何种数据进行消重？

对时间数据还是空间数据进行消重，对全局数据还是局部数据进行消重？这是首先需要考虑的因素，这直接决定着重删实现技术和数据消重率。随时间变化的数据，如周期性的备份、归档数据，比空间数据具有更高的消重率，重删技术在备份归档领域中被广泛应用。不难想象，全局范围内的数据重复率比局部范围数据要高，会获得更高的数据消重率。

重删在何处进行消重？

数据消重可以在源端(Source)或者目标端(Target)进行。源端消重在数据源进行，传输的是已经消重后的数据，能够节省网络带宽，但会占用大量源端系统资源。目标端消重发生在目标端，数据在传输到目标端再进行消重，它不会占用源端系统资源，但占用大量网络带宽。目标端消重的优势在于它对应用程序透明，并具有良好的互操作性，不需要使用专门的API，现有应用软件不用作任何修改即可直接应用。

安克诺斯重复删除

安克诺斯是一款可以让其用户在存储端和源端灵活选择重复删除的产品。当选择源端重删时，备份端在将数据传输至存储节点时之前执行重删操作，从而节省了带宽的需求。当选择在存储端重删时，备份客户端将所有备份数据传输至存储节点，然后由存储节点执行重复删除，所以节省了备份客户端的CPU资源。

源端的重复删除可以通过WAN链路启用远程办公室的备份，因为备份的数据在传输前已被去重，所以带宽需求通常被降至80-90%。

主要优势

• 多类型备份

重复数据删除可以应用在完整、增量和差异备份中。

• 高度安全性

重复删除数据存储需要特别的保护，所以这些数据不会被损坏。安克诺斯将重删组件单独存储，通过特殊保护防止对多实例数据的直接删除。

• 使用商用存储硬件

作为一个纯软件的解决方案。安克诺斯避免了昂贵的专用硬件的需求。

• 易用

安克诺斯重复删除是一个精心设计用于简化操作的功能。操作简单，无需培训。

• 完全与Acronis Backup 高级版集成

通过将安克诺斯数据保护与重删功能的完全集成，计算机宕机时，IT管理人员无需消耗大量的数据重构时间。安克诺斯只需几分钟，而不是几小时或者几天，就可完整恢复整个系统。

• 源端或者目标端的重删

灵活选择重删操作的位置，目标端或者源端计算机。

• 合理的成本

一些企业的重删产品是按照重删后数据量进行收费的，所以很难评估最后的总成本。而安克诺斯是按照保护的计算机进行收费，价格更加合理。

关于安克诺斯

通过AnyData引擎驱动的技术，以及优秀的镜像技术，安克诺斯能够为所有文件、应用程序和操作系统提供在任何环境下（包括虚拟，物理，云和移动环境）方便、完整、安全的备份服务。

公司成立于2002年，安克诺斯为全球超过145个国家的500万个人用户及50万家企业用户提供数据保护服务。拥有超过100项专利，安克诺斯产品被Network Computing、TechTarget和IT Professional 评为年度最佳产品。其产品涵盖众多功能，包括迁移，克隆和复制等。