|
|||||
|
|
| 一种批处理块级数据去重方法 | |
| 作者单位： | ;1.黄淮学院国际学院 |
| 摘 要： | 数据去重能消除备份中的冗余数据,节省存储资源和网络带宽,因而成为当前数据存储领域的研究热点。针对常用的块级数据去重技术指纹查询开销高、系统吞吐率低等问题,提出一种批处理块级数据去重方法,通过内存缓冲区对指纹进行排序,实现磁盘索引的顺序查询。同时文件以一种双指针有向无环图的结构存储在系统中,以消除文件读时引起的随机磁盘I/O开销。实验结果表明,该方法有效克服了指纹查询的磁盘I/O瓶颈,提高了数据去重时的系统读写性能。 |
| 关 键 词： | 备份 数据去重 指纹查询 批处理 |
A CHUNK-BASED DE-DUPLICATION METHOD BASED ON BATCH PROCESS |
|
| Abstract: | |
| Keywords: | |