1、隨著信息和網絡技術的快速發(fā)展,我們可以從網絡中獲得各種各樣的信息數(shù)據,不僅提高了我們的工作效率,也可以豐富我們的生活。但人們對信息數(shù)據存儲和備份的需求急速增長,帶來了信息數(shù)據量爆炸式地增長,數(shù)據存儲系統(tǒng)的存儲空間要求越來越大,網絡帶寬要求越來越高,能源消耗越來越嚴重,數(shù)據存儲和管理的成本不斷提高,致使現(xiàn)有數(shù)據存儲系統(tǒng)面臨著前所未有的壓力和挑戰(zhàn)。
　　盡管數(shù)據量成倍增加,但研究發(fā)現(xiàn),在現(xiàn)有的存儲系統(tǒng)中的數(shù)據存在大量的冗余數(shù)據,大約占

2、總信息的60％。因此,為了緩解信息數(shù)據量增長帶來的巨大壓力,減少冗余數(shù)據,充分利用現(xiàn)有資源,降低數(shù)據存儲管理成本,近些年提出了重復數(shù)據刪除技術,該技術能夠檢測并去除大量的冗余數(shù)據,優(yōu)化存儲空間和降低網絡帶寬,而且對重復數(shù)據刪除技術的研究已經成為最熱門的研究課題。
　　針對已有的文件備份系統(tǒng),冗余數(shù)據大量存在、可擴展性差、效率低并受限于網絡帶寬等瓶頸問題,本文提出一種基于源端重復數(shù)據刪除技術的文件備份系統(tǒng),并將重復數(shù)據刪除處理模塊放

3、到數(shù)據備份客戶端,用于實現(xiàn)文件分塊和數(shù)據去重,不但能去除大量冗余數(shù)據、增強系統(tǒng)擴展性和提高存儲備份效率,而且還能大幅度降低系統(tǒng)需求的網絡帶寬,實現(xiàn)冗余數(shù)據刪除過程和數(shù)據存儲備份過程的分離。
　　此外,在系統(tǒng)中設計了客戶端指紋庫和引用管理機制,客戶端指紋庫是總指紋庫的一個較小的子集,服務器端維持總的數(shù)據塊指紋庫,這樣可以優(yōu)化數(shù)據塊指紋查詢過程,提高重復數(shù)據塊指紋檢索性能,減少對服務器的訪問,也進一步降低了網絡帶寬。引用管理器能夠及時