Datu dedublikācija ir populāra un pieprasīta glabāšanas tehnoloģija, kas optimizē glabāšanas ietilpību. Tā novērš liekus datus, noņemot no datu kopas dublikātus, atstājot tikai vienu kopiju. Kā parādīts attēlā zemāk. Šī tehnoloģija var ievērojami samazināt fiziskās glabāšanas vietas nepieciešamību, lai apmierinātu pieaugošo pieprasījumu pēc datu glabāšanas. Dedublikācijas tehnoloģija var sniegt daudz praktisku priekšrocību, galvenokārt šādus aspektus:
| (1) | Atbilst ROI (ieguldījumu atdeves)/TCO (kopējo īpašumtiesību izmaksu) prasībām; |
| (2) | Straujo datu pieaugumu var efektīvi kontrolēt; |
| (3) | Palielināt efektīvu uzglabāšanas vietu un uzlabot uzglabāšanas efektivitāti; |
| (4) | Ietaupiet kopējās uzglabāšanas un pārvaldības izmaksas; |
| (5) | Ietaupiet datu pārraides tīkla joslas platumu; |
| (6) | Ietaupiet ekspluatācijas un uzturēšanas izmaksas, piemēram, vietu, barošanas avotu un dzesēšanu. |
Dedupe tehnoloģija tiek plaši izmantota datu dublēšanas un arhivēšanas sistēmās, jo pēc vairākām datu dublējumkopijām rodas daudz dublētu datu, kas šai tehnoloģijai ir ļoti piemērots. Faktiski dedupe tehnoloģiju var izmantot daudzās situācijās, tostarp tiešsaistes datu, gandrīz tiešsaistes datu un bezsaistes datu glabāšanas sistēmās. To var ieviest failu sistēmās, sējumu pārvaldniekos, NAS un sans. Dedupe var izmantot arī datu atkopšanai pēc katastrofām, datu pārraidei un sinhronizācijai, jo datu saspiešanas tehnoloģiju var izmantot datu iepakošanai. Dedupe tehnoloģija var palīdzēt daudzām lietojumprogrammām samazināt datu glabāšanas apjomu, ietaupīt tīkla joslas platumu, uzlabot glabāšanas efektivitāti, samazināt dublēšanas logu un ietaupīt izmaksas.
Dedupei ir divi galvenie aspekti: deduplikācijas koeficienti un veiktspēja. Dedupešanas veiktspēja ir atkarīga no konkrētās ieviešanas tehnoloģijas, savukārt dedupešanas ātrumu nosaka pašu datu īpašības un lietojumprogrammu modeļi, kā parādīts tabulā zemāk. Krātuves pakalpojumu sniedzēji pašlaik ziņo par deduplikācijas rādītājiem no 20:1 līdz 500:1.
| Augsts deduplikācijas līmenis | Zems deduplikācijas līmenis |
| Lietotāja izveidotie dati | Dati no dabas pasaules |
| Zems datu izmaiņu līmenis | Augsts datu izmaiņu ātrums |
| Atsauces dati, neaktīvie dati | Aktīvie dati |
| Zema datu maiņas ātruma lietojumprogramma | Augsta datu maiņas ātruma lietojumprogramma |
| Pilnīga datu dublēšana | Pakāpeniska datu dublēšana |
| Datu ilgtermiņa glabāšana | Datu īstermiņa glabāšana |
| Plašs datu lietojumprogrammu klāsts | Neliels datu lietojumprogrammu klāsts |
| Nepārtraukta datu biznesa apstrāde | Vispārīga datu biznesa apstrāde |
| Mazo datu segmentācija | Lielo datu segmentācija |
| Pagarināta datu segmentācija | Fiksēta garuma datu segmentācija |
| Uztvertais datu saturs | Datu saturs nav zināms |
| Laika datu deduplikācija | Telpisko datu deduplikācija |
Dedupe ieviešanas punkti
Izstrādājot vai pielietojot Dedupe tehnoloģiju, jāņem vērā dažādi faktori, jo šie faktori tieši ietekmē tās veiktspēju un efektivitāti.
| (1) | Kas | Kādi dati tiek atsvērti? |
| (2) | Kad | Kad svars tiks noņemts? |
| (3) | Kur | Kur ir svara zaudēšana? |
| (4) | Kā | Kā samazināt svaru? |
Dedupe Key tehnoloģija
Glabāšanas sistēmas deduplikācijas process kopumā ir šāds: vispirms datu fails tiek sadalīts datu kopās, katram datu blokam tiek aprēķināts pirkstu nospiedums, un pēc tam, pamatojoties uz pirkstu nospiedumu jaucējkodu meklēšanas atslēgvārdiem, atbilstība norāda datus, kas dublikātu datu blokiem saglabā tikai datu bloka indeksa numuru, pretējā gadījumā tas nozīmē, ka datu bloks ir vienīgā jaunā datu bloka daļa, kas tiek glabāta, un tiek izveidota atbilstoša metainformācija. Tādējādi fiziskais fails glabāšanas sistēmā atbilst FP metadatu kopas loģiskam attēlojumam. Lasot failu, vispirms tiek nolasīts loģiskais fails, pēc tam saskaņā ar FP secību no glabāšanas sistēmas tiek izņemts atbilstošais datu bloks un atjaunota fiziskā faila kopija. No iepriekš minētā procesa var redzēt, ka Dedupe galvenās tehnoloģijas galvenokārt ietver failu datu bloku segmentāciju, datu bloku pirkstu nospiedumu aprēķināšanu un datu bloku izgūšanu.
(1) Failu datu bloku segmentācija
(2) Datu bloka pirkstu nospiedumu aprēķināšana
(3) Datu bloku izguve
Lai atrastu šos ieteicamos modeļus tīkla pakešu deduplikācijas sākšanai, veiciet tālāk norādītās darbības.
Mylinking™ tīkla pakešu brokeris (NPB) ML-NPB-640048*10GE SFP+ plus 4*40GE/100GE QSFP28, maks. 880 Gb/s
Mylinking™ tīkla pakešu brokeris (NPB) ML-NPB-56606*40GE/100GE QSFP28 plus 48*10GE/25GE SFP28, maks. 1,8 Tbps
Mylinking™ tīkla pakešu brokeris (NPB) ML-NPB-506048*10GE SFP+ plus 2*40GE QSFP, maks. 560 Gb/s
Mylinking™ tīkla pakešu brokeris (NPB) ML-NPB-486048*10GE SFP+, maks. 480 Gbps, funkcija Plus
Mylinking™ tīkla pakešu brokeris (NPB) ML-NPB-481048*10GE SFP+, maks. 480 Gb/s
Mylinking™ tīkla pakešu brokeris (NPB) ML-NPB-2410P24*10GE SFP+, maks. 240 Gb/s, DPI funkcija
Mylinking™ tīkla pakešu brokeris (NPB) ML-NPB-6400
48*10GE SFP+ plus 4*40GE/100GE QSFP28, maks. 880 Gb/s
Publicēšanas laiks: 2022. gada 18. oktobris
