Дедупликация технологияларына арналған кешенді нұсқаулық

Деректерді қайталау нақты сақтау ортасының құнына, өнімділігіне, икемділігіне және талаптарына байланысты аппараттық немесе бағдарламалық құрал негізінде болуы мүмкін. Бұл технологиялардың әрқайсысының өзіндік артықшылықтары бар. Мұны толығырақ қарастырайық.

Деректер генерациясының ауқымды ұлғаюы сақтау сыйымдылығына бір уақытта сұранысқа әкелді. Сандар мұны растайды: Statista бұлтты сақтау нарығы 2030 жылға қарай 472 миллиард долларға дейін өседі деп болжайды, бұл CAGR 23% құрайды. 

Бұл деректер орталықтары жойылады дегенді білдірмейді. Statista сонымен қатар деректер орталығының жаһандық нарығының сегменті 2028 жылға қарай 14,6 миллиард долларға дейін өседі деп болжайды, бұл CAGR 30% құрайды. 

Бұл үнемі өсіп келе жатқан шығындар сақтау талаптарын азайтатын деректерді қайталау шешімдерінің дәлелі болып табылады.

Деректердің дедупликациясы дегеніміз не?

Көбіміз деректерді қысуды түсінетін болсақ, деректерді қысқартудағы қайталаудың рөліне тереңірек қарау оның сақтау құнының өсуін бақылаудағы маңыздылығын көрсетеді. TechTarget анықтамасынан бастайық: Деректерді қайталау - бұл деректердің артық көшірмелерін жоятын және сақтау шығындарын азайтатын процесс.

Деректерді қайталау әдістері жад тасушыларында (диск, флэш, таспа және бұлт сияқты) деректердің бір ғана бірегей данасы сақталуын қамтамасыз етеді.

Деректерді қайталау нақты сақтау ортасының құнына, өнімділігіне, икемділігіне және талаптарына байланысты аппараттық немесе бағдарламалық құрал негізінде болуы мүмкін. Міне, әр тәсілдің кейбір айырмашылықтары мен артықшылықтары:

Аппараттық құралдардың қайталануы

Аппараттық құралдарды қайталау арнайы сақтау құрылғысында немесе деректерді қайталау үшін арнайы жасалған басқа құрылғыда орындалады. Құрылғының бұл түрі сақтау деңгейінде жұмыс істейді және әдетте бағдарламалық құралды қайталау тапсырмалары үшін арнайы оңтайландырылғандықтан, жақсырақ жұмыс істейді. 

Arcserve OneXafe - деректерді терең азайтуды қамтамасыз ететін және қолданба түріне байланысты теңшелген деректерді азайтуды ұсынатын мысалдардың бірі. 

Аппараттық құралдардың қайталануының кейбір кемшіліктері бар, соның ішінде масштабтауға шектеулер (әсіресе бұлтпен салыстырғанда) және бар жүйелермен біріктіру тұрғысынан шектеулі икемділік. Arcserve OneXafe жад қажеттіліктері өскен сайын дискілер мен кластерлерді қосуды жеңілдететін масштабтау әдісін пайдалана отырып, масштабтауға мүмкіндік береді.

Бағдарламалық қамтамасыз ету негізіндегі дедупликация

Әдетте серверде жұмыс істейтін қолданба арқылы орындалатын деректерді қайталау бағдарламалық құралы сақтық көшірме шешімінің (мысалы, Arcserve Unified Data Protection (UDP) бағдарламалық құралы ) немесе файлдық жүйенің бөлігі болуы мүмкін. Кейбір көшірмелерді жою бағдарламалық құралының шешімдері өнімділікті төмендетуі мүмкін болса да, Arcserve UDP жергілікті құрылғыға (мысалы, Arcserve OneXafe) немесе орталық қалпына келтіру нүктесі серверіне (RPS) сақтық көшірме жасауға рұқсат беру арқылы өнімділік кедергілерін жоятын жаһандық бастапқы дереккөзді дедопликацияны пайдаланады. . 

Бағдарламалық қамтамасыз ету тәсілі аппараттық тәсілге қарағанда арзанырақ болуы мүмкін, себебі ол бар инфрақұрылымда жұмыс істей алады. Ол сондай-ақ қосымша ресурстарды қосу және масштабтау кезінде сізге үлкен икемділік пен ауқымдылықты береді. Arcserve UDP сияқты бағдарламалық құралды сақтау жүйелерімен және орталармен біріктіру оңайырақ.

Дедупликация қалай жұмыс істейді

Дедупликация үш негізгі бағытты қарастырады:

Дедупликация процесі

Аппараттық және бағдарламалық қамтамасыз ету деупликациясы ұқсас процестерді пайдаланады. Деректер көшірме жасау процесінің немесе нақты уақыттағы жадты оңтайландырудың бөлігі ретінде аппараттық құралдарға негізделген тәсілдерді пайдалана отырып, көшіру құралына енгізіледі. Керісінше, бағдарламалық құралды қайталау басқа сақтау құрылғыларын немесе бұлтты пайдаланады. 

Қайталанатын сегменттерді анықтау үшін екеуі де кіріс деректерді талдайды. Бағдарламалық жасақтаманың дизайнына байланысты бұл файл, блок немесе байт деңгейінде бекітілген немесе айнымалы өлшемді бөліктерде де орындалуы мүмкін. Қайталанатын деректер сегменттерін анықтау үшін көшірмелерді жою механизмі кіріс деректерді талдайды. 

Деректерді бөлшектеу

Содан кейін деректер кішірек сегменттерге немесе бөліктерге бөлінеді, бұл бөліктердің өлшемі пайдаланылатын қайталану әдісіне байланысты өзгереді. OneXafe деупликация үшін айнымалы және тіркелген ұзындық сегменттерін ұсынады. 

Бекітілген ұзындықтағы дедупликация біркелкі сегмент ұзындықтарын пайдаланады және тұрақты өлшемдегі ақпарат үшін деректерді азайтудың жақсы жылдамдығын қамтамасыз етеді. Айнымалы ұзындықты қайталау оңтайлы деупликация шекараларын анықтау үшін жылжымалы терезені пайдаланады. 

Деректер саусақ іздері

Деректердің әрбір сегменті сол сегмент үшін бірегей идентификаторды (оны саусақ ізі ретінде қарастырыңыз) жасау үшін SHA-256 сияқты криптографиялық хэш функциясын пайдаланып хэштенеді. Бұл хэш функциясы деректердегі шамалы өзгерістердің өзі мүлдем басқа хэш мәніне әкелетінін қамтамасыз етеді. Саусақ іздері бұрын сақталған деректер сегменттерінің индексімен салыстырылады және сәйкестік табылса, бұл сегменттің көшірме екенін көрсетеді.

Дискіде индексте сәйкес келмейтін деректердің бірегей сегменттері ғана сақталады. Оның орнына әрбір қайталанатын сегмент үшін жүйе бұрын сақталған сегментке көрсеткіш жазады. Деректерді шығарып алу қажет болғанда, қайталау жүйесі сақталған бірегей сегменттер мен көрсеткіштерден бастапқы деректерді жинау үшін индексін пайдаланады. 

Дедупликацияның технологиялық мүмкіндіктері

Аппараттық құралдарды қайталау өңдеу кезінде де, өңдеуден кейін де жүзеге асырылуы мүмкін. Кірістірілген дедупликация деректерді сақтау жүйесіне жазылған кезде нақты уақытта талдайды және қайталайды. Дедупликация өңдеуден кейін деректерді сақтайды және оларды белгілі бір уақыт аралығында қайталайды. 

Arcserve OneXafe тұрақты және айнымалы ұзындықтағы дедупликация жергілікті құрылғыны сығумен біріктіріліп, деректерді максималды қысқартуды, сақтау орнын 90 пайызға дейін үнемдеуді және 10:1 дейінгі қайталану коэффициенттерін қамтамасыз етеді.

Сақтаудың үнемді шешімдері

Сығымдау және қайталау арқылы сақтау орнын азайту - сақтау шығындарын азайтудың алғашқы қадамы. Жад қажеттіліктері өскен сайын шығындарды тиісті деңгейде ұстауға көмектесетін басқа стратегиялар бар.