专家解答：重复数据删除
当前，企业面对各种来自数据保护的挑战。数据的增长速度空前惊人，导致存储容量频频告急，即便是数据存储位置已经趋于分散，数据集之间的连接日趋复杂，这种情况依然未能得到缓解。事实上，据许多专家分析，企业存储每年约增长50%到60%甚至更多，而存储利用率却仅为30%到40%。除此之外，为了存储数据到数据中心或将数据传递到远程站点，企业通常会对同样的数据备份50到500次，因而产生了大量的重复数据。通过将重复数据删除技术纳入整体备份战略，企业能够大幅提高存储和带宽利用率。
8bXz VIV8x}*Y
7a0ID)r$j'o2~7F
w
[b][color=Purple]什么是重复数据删除？能够为数据保护方面带来哪些好处？[/color][/b]AJ e w
Df+j$J
3L0ytIgx;C
从根本上讲，重复数据删除能在子文件夹或拦截层级就从所有的备份数据中找到多余的数据。这一重复数据删除的过程可以通过软件或硬件完成。通过软件的方式，你能够在数据被发送到备份前删除客户端的重复数据。这一方法能够节省带宽和存储。如果是硬件的方法，则可在数据写入目标磁盘位置之前删除重复数据，大幅减少存储占用。除改善备份流程之外，重复数据删除技术能够通过减少在不同站点之间迁移大量数据所需的带宽，从而增强灾难恢复。,H0A4[-slh
OFZ(P:r
[b][color=Purple]重复数据删除可以应用在哪些方面？[/color][/b]z0moM_%YF+Xz
r4a Ue[.~ A h Zcs
基于软件的重复数据删除能够降低带宽消耗并优化存储利用率，因此适用于带宽和生产力有限的企业环境，尤其是远程站点、服务器分散的中型站点、或是虚拟服务器环境。如果备份流程中的带宽限制问题不大，与数据中心环境的状况相同，企业会更倾向于选择部署基于目标的重复数据删除系统，因为这种方式需要对现有备份架构做出的改变最少。尽管重复数据删除常用于保护文件服务器和应用服务器上的备份数据，企业期望能看到更多的备份数据类型（例如台式机和便携式电脑），以及应用在主要存储上的重复数据删除技术。
t{*cK#[
1P o1R?-\(Mt
[b][color=Purple]重复数据删除如何提高存储利用率？[/color][/b]
'Bk6|3A(Da T;Ydh
.A,BL0L \9J#o t)H
客户端和目标端的重复数据删除都能够提供高水平的存储优化，只是在备份数据路径中实现的点不同。客户端重复数据删除在备份流程中的一部分资源中删除重复数据。目标端的重复数据删除则在数据写入磁盘之前删除重复数据，包括基于硬件和基于软件这两种重复数据删除系统。与传统基于磁带的备份方法相比，重复数据删除能够降低备份存储消耗达10到50倍。存储优化程度取决于数据类型、数据变更率以及保存时间。传统办公文件类型是优化的最主要对象，最少的则是对于压缩数据格式，例如音频、视频以及医疗影像等。
-W
HL C c;N8h N
\6B9P{xH o @ E/R
[b][color=Purple]重复数据删除与压缩有何不同？[/color][/b]8E$C"F(wCnN
u+N/@D utaC
尽管这两种技术都能够减少备份数据的大小，但是这两种方法的流程和结果却有很大不同。压缩能够适用于文件、目录或是大量数据，但是却缺乏对于隐藏数据的覆盖，因此无法辨识存在于不同目录下的相同文件。更重要的是，与重复数据删除的流程不同，压缩程序无法辨识数据变更或在子文件层级捕获唯一不同的拦截。换句话说，压缩能够降低所要处理的数据大小但是却缺乏对于整体内容的了解，从而影响到存储这些数据的空间。
TRL y&oK
$P*S/LN'u M BlD
[b][color=Purple]基于软件的重复数据删除如何在初始完整备份中降低带宽？[/color][/b]-Z iu0[tVr A+X
.[/t]K] W4q@8k
一般来说，初始完整整形备份将100%的数据通过网络发送到备份应用；备份应用然后将这些数据导向存储介质资源，通常是磁带或磁盘，能够进行压缩或重复数据删除。凭借客户端重复数据删除，安装在系统上的代理能够在数据从网络中移动时便消除多余的数据。通过部署重复数据删除的系统进行初始完整备份，所需带宽要比原先少4倍左右。$x7A!W$Y7xD`!K
V.r:]f!\lBD p
[b][color=Purple]重复数据删除能否在后继完整备份中降低带宽？[/color][/b]
5m bE m:t |(F v%y b
pPp9b,k#Km
传统备份方法的最佳实践通常要求进行后继完整备份，这就需要占用大量的带宽。相比而言，客户端重复数据删除能够降低后继完整备份的带宽需求，仅为原先的1%。
X dq$j%] as
s |L(T5c8?n"x
[b][color=Purple]重复数据删除能否降低增量备份中的带宽？[/color][/b]
3ldn%? wN
1H%W"IW ^,b%] j
增量备份中的客户端重复数据删除技术能够提高带宽利用率达12倍，因为重复数据删除技术仅就发生变化或修改的文件进行备份，而并非像传统整形备份对整个文件进行备份。 @,o+P NE u1A3h6t
3w [/w~:b0W%Au?&Y
[b][color=Purple]对于不同的应用和文件类型，重复数据删除率分别为多少？[/color][/b]_
wQ)v A9} T C#?
p8NcW j
O mTD [
数据和文件类型的变更率会影响到重复数据删除的程度。正如车辆的行驶里程也会受也会受到天气条件和路面状况的影响一样，重复数据删除的有效率取决于数据来源类型和数据变更率。适用基于客户端的重复数据删除时，带宽降低能够达到80%到98%，因数据类型而有所不同。在存储端，与之前采用磁带或磁盘的方法相比，大多数用户能够降低5%到20%。
7sD
l"H M
v3a'go(^:tAp c'[
[[i] 本帖最后由 特爱蚂蚁 于 2008-7-17 16:42 编辑 [/i]] |