支持数据去重网络备份系统中数据恢复性能优化方法.pdf

独创性声明本人声明所呈交的学位论文是我个人在导师指导下进行的研究工作及取得的研究成果。尽我所知,除文中已经标明引用的内容外,本论文不包含任何其他个人或集体已经发表或撰写过的研究成果。对本文的研究做出贡献的个人和集体,均已在文中以明确方式标明。本人完全意识到,本声明的法律结果由本人承担。学位论文作者签名:日期:年月日学位论文版权使用授权书本学位论文作者完全了解学校有关保留、使用学位论文的规定,即:学校有权保留并向国家有关部门或机构送交论文的复印件和电子版,允许论文被查阅和借阅。本人授权华中科技大学可以将本学位论文的全部或部分内容编入有关数据库进行检索,可以采用影印、缩印或扫描等复制手段保存和汇编本学位论文。保密□,在_____年解密后适用本授权书。本论文属于不保密□。(请在以上方框内打“√”)学位论文作者签名:指导教师签名:日期:年月日日期:年月日华中科技大学硕士学位论文I摘要计算机网络信息技术飞速发展,社会进入大数据时代,数据在日常生活中也扮演着越来越重要的角色。备份系统的备份及恢复功能为数据的安全提供了保障。备份的目的是为了恢复。云备份用户和云备份服务提供者之间的网络连接通常是带宽较低的广域网络,数据备份及恢复的性能因此受到限制。大多数备份和恢复的数据集是从它们之前的备份版本演化而来的,只有少量的修改、插入或删除,大多数文件和数据块在备份之后完全没有变化。学术界和工业界使用数据去重技术来删除这些重复数据,但是只提升了数据备份的性能。将文件级和块级两个粒度的数据去重技术应用到网络备份系统的数据恢复操作中,可以提升数据恢复的性能。首先使用文件级的数据去重技术过滤掉重复文件的数据,然后进一步使用块级的数据去重技术过滤掉不同文件之间的重复数据块,此时剩下的才是必须在网络上传输的数据。通过删除这些重复的数据,能显著地提升系统的数据恢复性能。测试表明,将文件级和块级两个粒度的数据去重技术应用到数据恢复中可以显著减少恢复过程中传输的数据量,节约网络带宽资源,提升数据恢复性能。关键词:网络备份,数据去重,数据恢复华中科技大学硕士学位论文IIAbstractAs we know,the technology of informationand network is developing very fast,human society has entered the big data times,Data is playing a more and more important role in our daily backup systems to backup and restore our data can be very helpful to bandwidth of the linkbetween users and backup service providers is often very low, which results in low performance of data backup and recovery. Most backup and recoverydatasetsis evolved from their previous versions, with only minor modifications, insertsor deleting,most of the files and data blocks did not change after the last and Industry use the source-side data de-duplication to delete the duplicate files and data blocks, which only improves the performance of data this paper, we apply both file-level and block-level data de-duplication to data recovery, which can certainly improve the performance of data , we use file-level data de-duplication to delete those duplicate files, and thenweuse block-leve