De-dublikimi i të dhënave është një teknologji shumë e njohur e ruajtjes që optimizon kapacitetin e ruajtjes. Ajo eliminon të dhënat e tepërta duke hequr të dhënat e dyfishta nga grupi i të dhënave, duke lënë vetëm një kopje. Siç tregohet në figurën më poshtë. Kjo teknologji mund ta zvogëlojë shumë nevojën për hapësirë fizike ruajtjeje për të përmbushur kërkesën në rritje për ruajtjen e të dhënave. Teknologjia De-dublikimi mund të sjellë shumë përfitime praktike, kryesisht duke përfshirë aspektet e mëposhtme:
| (1) | Përmbush kërkesat e ROI (Kthimit të Investimit)/TCO (Kostos Totale të Pronësisë); |
| (2) | Rritja e shpejtë e të dhënave mund të kontrollohet në mënyrë efektive; |
| (3) | Rrit hapësirën efektive të magazinimit dhe përmirëson efikasitetin e magazinimit; |
| (4) | Kurseni koston totale të magazinimit dhe koston e menaxhimit; |
| (5) | Ruani gjerësinë e brezit të rrjetit të transmetimit të të dhënave; |
| (6) | Kurseni kostot e operimit dhe mirëmbajtjes, siç janë hapësira, furnizimi me energji dhe ftohja. |
Teknologjia Dedupe përdoret gjerësisht në sistemet e backup-it dhe arkivimit të të dhënave, sepse ka shumë të dhëna të dyfishta pas backup-eve të shumëfishta të të dhënave, gjë që është shumë e përshtatshme për këtë teknologji. Në fakt, teknologjia dedupe mund të përdoret në shumë situata, duke përfshirë të dhënat online, të dhënat near-line dhe sistemet e ruajtjes së të dhënave offline. Mund të zbatohet në sistemet e skedarëve, menaxherët e vëllimeve, NAS dhe sans. Dedupe mund të përdoret gjithashtu për rikuperimin e të dhënave nga fatkeqësitë, transmetimin dhe sinkronizimin e të dhënave, pasi një teknologji e kompresimit të të dhënave mund të përdoret për paketimin e të dhënave. Teknologjia Dedupe mund të ndihmojë shumë aplikacione të zvogëlojnë ruajtjen e të dhënave, të kursejnë bandwidth-in e rrjetit, të përmirësojnë efikasitetin e ruajtjes, të zvogëlojnë dritaren e backup-it dhe të kursejnë kostot.
Dedupe ka dy dimensione kryesore: raportet e deduplikimit dhe performancën. Performanca e dedupe varet nga teknologjia specifike e implementimit, ndërsa shkalla e Dedupe përcaktohet nga karakteristikat e vetë të dhënave dhe modelet e aplikacionit, siç tregohet në tabelën më poshtë. Shitësit e magazinimit aktualisht raportojnë shkallë deduplikimi që variojnë nga 20:1 në 500:1.
| Shkallë e lartë e heqjes së dyfishimeve | Shkalla e ulët e heqjes së dyfishimeve |
| Të dhënat e krijuara nga përdoruesi | Të dhëna nga bota natyrore |
| Shkalla e ulët e ndryshimit të të dhënave | Shkalla e lartë e ndryshimit të të dhënave |
| Të dhëna referuese, të dhëna joaktive | Të dhëna aktive |
| Aplikim me shkallë të ulët ndryshimi të të dhënave | Aplikacion me shpejtësi të lartë ndryshimi të të dhënave |
| Kopje rezervë e plotë e të dhënave | Kopje rezervë shtesë e të dhënave |
| Ruajtja afatgjatë e të dhënave | Ruajtja afatshkurtër e të dhënave |
| Gamë e gjerë aplikacionesh të të dhënave | Gamë e vogël e aplikacioneve të të dhënave |
| Përpunimi i vazhdueshëm i të dhënave të biznesit | Përpunimi i të dhënave të përgjithshme të biznesit |
| Segmentimi i të dhënave të vogla | Segmentimi i të dhënave të mëdha |
| Segmentimi i zgjatur i të dhënave | Segmentimi i të dhënave me gjatësi fikse |
| Përmbajtja e të dhënave e perceptuar | Përmbajtja e të dhënave është e panjohur |
| Dedublikimi i të dhënave kohore | Dedublikimi i të dhënave hapësinore |
Pikat e Implementimit të Dedupe
Gjatë zhvillimit ose aplikimit të teknologjisë Dedupe duhen marrë në konsideratë faktorë të ndryshëm, pasi këta faktorë ndikojnë drejtpërdrejt në performancën dhe efektivitetin e saj.
| (1) | Çfarë | Cilat të dhëna çpeshohen? |
| (2) | Kur | Kur do të zhduket pesha? |
| (3) | Ku | Ku është heqja e peshës? |
| (4) | Si | Si ta zvogëloni peshën? |
Teknologjia Dedupe Key
Procesi i deduplikimit të sistemit të ruajtjes në përgjithësi është ky: së pari, skedari i të dhënave ndahet në një grup të dhënash, për secilin bllok të dhënash llogaritet gjurmë gishtash, dhe më pas, bazuar në fjalët kyçe të kërkimit Hash të gjurmëve të gishtave, përputhja tregon të dhënat për blloqet e të dhënave të dublikuara, ruan vetëm numrin e indeksit të bllokut të të dhënave, përndryshe do të thotë që blloku i të dhënave është e vetmja pjesë e një blloku të ri të të dhënave që ruan dhe krijon meta informacion përkatës. Kështu, një skedar fizik në sistemin e ruajtjes korrespondon me një përfaqësim logjik të një grupi meta të dhënash FP. Kur lexoni skedarin, së pari lexoni skedarin logjik, pastaj sipas sekuencës FP, hiqni bllokun përkatës të të dhënave nga sistemi i ruajtjes, rivendosni kopjen e skedarit fizik. Nga procesi i mësipërm mund të shihet se teknologjitë kryesore të Dedupe përfshijnë kryesisht segmentimin e bllokut të të dhënave të skedarëve, llogaritjen e gjurmëve të gishtave të bllokut të të dhënave dhe rikthimin e bllokut të të dhënave.
(1) Segmentimi i bllokut të të dhënave të skedarëve
(2) Llogaritja e gjurmëve të gishtave të bllokut të të dhënave
(3) Rikthimi i bllokut të të dhënave
Për të gjetur këto modele të rekomanduara për të filluar Network Packet Deduplication:
Ndërmjetësi i Paketave të Rrjetit Mylinking™ (NPB) ML-NPB-640048*10GE SFP+ plus 4*40GE/100GE QSFP28, Maks. 880Gbps
Ndërmjetësi i Paketave të Rrjetit Mylinking™ (NPB) ML-NPB-56606*40GE/100GE QSFP28 plus 48*10GE/25GE SFP28, Maks. 1.8Tbps
Ndërmjetësi i Paketave të Rrjetit Mylinking™ (NPB) ML-NPB-506048*10GE SFP+ plus 2*40GE QSFP, Maks 560Gbps
Ndërmjetësi i Paketave të Rrjetit Mylinking™ (NPB) ML-NPB-486048*10GE SFP+, Maks 480Gbps, Funksion Plus
Ndërmjetësi i Paketave të Rrjetit Mylinking™ (NPB) ML-NPB-481048*10GE SFP+, Maks. 480Gbps
Ndërmjetësi i Paketave të Rrjetit Mylinking™ (NPB) ML-NPB-2410P24*10GE SFP+, Maks. 240Gbps, Funksioni DPI
Ndërmjetësi i Paketave të Rrjetit Mylinking™ (NPB) ML-NPB-6400
48*10GE SFP+ plus 4*40GE/100GE QSFP28, Maks. 880Gbps
Koha e postimit: 18 tetor 2022
