重复数据删除技术详解(一).pdf

重复数据删除技术详解（一）

在之前的文章“备份系统中的常见功能特性”中简单介绍了下重复数据删除的概念，本文就重

复数据删除（也叫数据去重）技术进行深入讲解。

概述

重复数据删除（后文简称“重删”）是灾备系统中非常重要的一项能力，它通过删除数据集中

的重复数据达到缩减数据量的效果，以此满足日益增长的数据存储需求。重复数据删除技术

在灾备系统中应用十分广泛，当然这项技术本身也不仅仅用于灾备系统，同样应用于存储系

统、数据传输和同步、论文查重等场景。其带来的主要优势包括：

•降低数据存储量，节省空间。

•降低网络数据传输量，节省带宽。

•提升存储效率。