Miesięcznik informatyków i menedżerów IT sektora publicznego

Sławomir Pruchnicki

Deduplikacja zbiorów plikowych

PAMIĘCI MASOWE | Backup danych wiąże się z koniecznością zakupu pojemnych nośników potrzebnych do zapisu kopii zapasowych. W przypadku rozbudowanych organizacji, gdzie objętość „zapasów” mierzy się w terabajtach, już sam koszt infrastruktury do przechowywania może być horrendalny. Sposobem na złagodzenie gigantycznych wydatków jest technologia deduplikacji.

eduplikacja to, jak sama nazwa wskazuje, eliminowanie duplikatów. W odniesieniu do back­upu danych duplikaty postrzega się nie na poziomie plików (przykładowo dwa identyczne dokumenty tekstowe), ale na poziomie części pliku zwanych blokami. W praktyce bowiem deduplikacja dzieli każdy plik na bloki i zapisuje te z nich, które napotyka w zbiorze danych po raz pierwszy. W każdym kolejnym back­upowanym pliku deduplikacja rozpoznaje uprzednio zapisane bloki i zamiast zapisywać je na nowo, tworzy jedynie referencje, dzięki którym podczas odzysku danych jest w stanie przywrócić wszystkie pliki w oryginalnej formie. Pozwala to na osiągnięcie korzystnych współczynników kompresji i zmniejszenie zapotrzebowania na pojemne nośniki danych. Dzięki deduplikacji oszczędzamy więc pieniądze, które mogą zostać przeznaczone na inne inwestycje. Poza tym dzięki temu, że tworzymy kopię zapasową mniejszej ilości danych, czas potrzebny na wykonanie zadania backupowego (tzw. okno backupowe) jest znacznie krótszy.

Tradycyjne metody deduplikacji

Deduplikacja blokiem o stałej wielkości (z ang. fixed-block) dzieli plik na bloki o identycznej wielkości (od 4 kB do 64 kB). Dzięki temu, że każdy plik dzielony jest w dokładnie taki sam sposób, ten rodzaj deduplikacji jest bardzo szybki.

[...]

Autor jest product managerem w spółce Dagma. Zajmuje się tematyką bezpieczeństwa IT i wdrażaniem rozwiązań backupu.

Pełna treść artykułu jest dostępna w papierowym wydaniu pisma. Zapraszamy do składania zamówień na prenumeratę i numery archiwalne.
 
 

Admin wITek

Admin wITek - Maj 2012

Galeria wITka   

Polecamy

Biblioteka Informacja Publiczna

Specjalistyczne publikacje książkowe dla pracowników administracji publicznej

więcej