SYSTEM AND METHOD FOR DATA STORAGE

Described are computer-based methods and apparatuses, including computer program products, for removing redundant data from a storage system. In one example, a data delineation process delineates data targeted for de-duplication into regions using a plurality of markers. The de-duplication system determines which of these regions should be subject to further de-duplication processing by comparing metadata representing the regions to metadata representing regions of a reference data set. The de-duplication system identifies an area of data that incorporates the regions that should be subject to further de-duplication processing and de-duplicates this area with reference to a corresponding area within the reference data set. L'invention concerne des procédés et des appareils informatiques, y compris des produits-programmes d'ordinateur, permettant de supprimer des données redondantes d'un système de stockage. Dans un exemple, un système de délimitation des données délimite les données ciblées pour la déduplication en régions au moyen d'une pluralité de marqueurs. Le système de déduplication détermine lesquelles parmi ces régions doivent être soumises à un autre traitement de déduplication en comparant les métadonnées représentant les régions aux métadonnées représentant des régions d'un ensemble de données de référence. Le système de déduplication identifie une zone de données qui intègre les régions à soumettre à un autre traitement de déduplication et déduplique cette zone avec une référence à une zone correspondante dans l'ensemble de données de référence.