Duomenų dublikatų šalinimas yra populiari ir populiari saugojimo technologija, optimizuojanti saugojimo talpą. Ji pašalina nereikalingus duomenis, pašalindama pasikartojančius duomenis iš duomenų rinkinio ir palikdama tik vieną kopiją. Kaip parodyta paveikslėlyje žemiau. Ši technologija gali gerokai sumažinti fizinės saugyklos vietos poreikį, kad būtų patenkintas augantis duomenų saugojimo poreikis. Dubliavimo šalinimo technologija gali suteikti daug praktinės naudos, daugiausia įskaitant šiuos aspektus:
| (1) | Atitikti investicijų grąžos (ROI) / bendrųjų nuosavybės sąnaudų (TCO) reikalavimus; |
| (2) | Sparčiai augantį duomenų kiekį galima efektyviai kontroliuoti; |
| (3) | Padidinti efektyvią saugojimo erdvę ir pagerinti saugojimo efektyvumą; |
| (4) | Sutaupykite bendras saugojimo ir valdymo išlaidas; |
| (5) | Taupykite duomenų perdavimo tinklo pralaidumą; |
| (6) | Sutaupykite eksploatavimo ir priežiūros išlaidas, tokias kaip erdvė, elektros energijos tiekimas ir aušinimas. |
„Dedupe“ technologija plačiai naudojama duomenų atsarginių kopijų kūrimo ir archyvavimo sistemose, nes po kelių duomenų atsarginių kopijų lieka daug pasikartojančių duomenų, o tai labai tinka šiai technologijai. Iš tiesų, „dedupe“ technologiją galima naudoti daugelyje situacijų, įskaitant internetinius duomenis, beveik tiesioginius duomenis ir neprisijungus pasiekiamas duomenų saugojimo sistemas. Ji gali būti įdiegta failų sistemose, tomų tvarkyklėse, NAS ir sans. „Dedupe“ taip pat gali būti naudojama duomenų atkūrimui po nelaimių, duomenų perdavimui ir sinchronizavimui, nes duomenų glaudinimo technologija gali būti naudojama duomenims pakuoti. „Dedupe“ technologija gali padėti daugeliui programų sumažinti duomenų saugyklą, sutaupyti tinklo pralaidumą, pagerinti saugojimo efektyvumą, sumažinti atsarginių kopijų kūrimo langą ir sutaupyti išlaidų.
Deduplikacija turi du pagrindinius matmenis: deduplikacijos koeficientus ir našumą. Deduplikacijos našumas priklauso nuo konkrečios įgyvendinimo technologijos, o deduplikacijos greitis priklauso nuo pačių duomenų charakteristikų ir taikymo modelių, kaip parodyta toliau pateiktoje lentelėje. Šiuo metu saugyklų tiekėjai nurodo deduplikacijos rodiklius nuo 20:1 iki 500:1.
| Didelis deduplikacijos rodiklis | Mažas deduplikacijos rodiklis |
| Vartotojo sukurti duomenys | Duomenys iš gamtos pasaulio |
| Mažas duomenų kaitos greitis | Didelis duomenų kaitos greitis |
| Atskaitos duomenys, neaktyvūs duomenys | Aktyvūs duomenys |
| Mažo duomenų keitimo dažnio programa | Didelio duomenų keitimo dažnio taikymas |
| Pilnas duomenų atsarginis kopijavimas | Papildomas duomenų atsarginis kopijavimas |
| Ilgalaikis duomenų saugojimas | Trumpalaikis duomenų saugojimas |
| Platus duomenų taikymų spektras | Nedidelis duomenų programų spektras |
| Nuolatinis duomenų verslo apdorojimas | Bendras duomenų verslo apdorojimas |
| Mažų duomenų segmentavimas | Didelių duomenų segmentavimas |
| Pailgintas duomenų segmentavimas | Fiksuoto ilgio duomenų segmentavimas |
| Suvokiamas duomenų turinys | Duomenų turinys nežinomas |
| Laiko duomenų deduplikacija | Erdvinių duomenų deduplikacija |
Dedupe įgyvendinimo taškai
Kuriant arba taikant „Dedupe“ technologiją, reikėtų atsižvelgti į įvairius veiksnius, nes šie veiksniai tiesiogiai veikia jos veikimą ir efektyvumą.
| (1) | Kas | Kokie duomenys yra svertiniai? |
| (2) | Kada | Kada svoris bus pašalintas? |
| (3) | Kur | Kur svorio metimas? |
| (4) | Kaip | Kaip sumažinti svorį? |
„Dedupe Key“ technologija
Bendras saugojimo sistemos deduplikacijos procesas yra toks: pirmiausia duomenų failas padalijamas į duomenų rinkinį, kiekvienam duomenų blokui apskaičiuojamas pirštų atspaudas, o tada, remiantis pirštų atspaudų maišos paieškos raktažodžiais, atitikimas nurodo dublikatų duomenų blokus, saugo tik duomenų bloko indekso numerį, kitaip tai reiškia, kad duomenų blokas yra vienintelė naujo duomenų bloko dalis, saugoma ir sukuriama atitinkama metainformacija. Taigi, fizinis failas saugojimo sistemoje atitinka loginį FP metaduomenų rinkinio atvaizdavimą. Skaitant failą, pirmiausia nuskaitomas loginis failas, tada pagal FP seką iš saugojimo sistemos išimamas atitinkamas duomenų blokas, atkuriama fizinio failo kopija. Iš minėto proceso matyti, kad pagrindinės „Dedupe“ technologijos daugiausia apima failų duomenų blokų segmentavimą, duomenų blokų pirštų atspaudų skaičiavimą ir duomenų blokų paiešką.
(1) Failų duomenų blokų segmentavimas
(2) Duomenų bloko pirštų atspaudų skaičiavimas
(3) Duomenų blokų paieška
Norėdami rasti šiuos rekomenduojamus modelius tinklo paketų deduplikacijai pradėti:
„Mylinking™“ tinklo paketų tarpininkas (NPB) ML-NPB-640048 * 10GE SFP+ plius 4 * 40GE/100GE QSFP28, maks. 880 Gbps
„Mylinking™“ tinklo paketų tarpininkas (NPB) ML-NPB-56606 * 40GE / 100GE QSFP28 ir 48 * 10GE / 25GE SFP28, maks. 1,8 Tbps
„Mylinking™“ tinklo paketų tarpininkas (NPB) ML-NPB-506048 * 10GE SFP+ plius 2 * 40GE QSFP, maks. 560 Gbps
„Mylinking™“ tinklo paketų tarpininkas (NPB) ML-NPB-486048 * 10GE SFP+, maks. 480 Gbps, „Function Plus“
„Mylinking™“ tinklo paketų tarpininkas (NPB) ML-NPB-481048 * 10GE SFP+, maks. 480 Gbps
„Mylinking™“ tinklo paketų tarpininkas (NPB) ML-NPB-2410P24 * 10GE SFP+, maks. 240 Gbps, DPI funkcija
„Mylinking™“ tinklo paketų tarpininkas (NPB) ML-NPB-6400
48 * 10GE SFP+ plius 4 * 40GE/100GE QSFP28, maks. 880 Gbps
Įrašo laikas: 2022 m. spalio 18 d.
