Мизоҷони туркии мо аз мо хоҳиш карданд, ки нусхаи эҳтиётии маркази додаҳои худро дуруст танзим кунем. Мо дар Русия лоиҳаҳои шабеҳро иҷро мекунем, аммо дар ин ҷо ҳикоя бештар дар бораи таҳқиқи он буд, ки чӣ тавр беҳтар кардани он.
Бо назардошти он: як нигаҳдории маҳаллии S3 мавҷуд аст, Veritas NetBackup мавҷуд аст, ки функсияи нави васеъ барои интиқоли маълумот ба нигаҳдории объектро ба даст овардааст, ҳоло бо дастгирии нусхабардорӣ ва мушкили фазои холӣ дар ин нигаҳдории маҳаллӣ вуҷуд дорад.
Вазифа: ҳама чизро тавре созед, ки раванди нигоҳ доштани нусхаҳои эҳтиётӣ зуд ва арзон бошад.
Воқеан, пеш аз ин, ҳама чиз дар S3 танҳо файлҳо буд ва инҳо таркибҳои пурраи мошинҳои муҳими маркази додаҳо буданд. Яъне, он чандон оптимизатсия нашудааст, аммо ҳама чиз дар ибтидо кор мекард. Акнун вақти он расидааст, ки онро дуруст фаҳмем ва онро дуруст анҷом диҳем.
Дар расм нишон медиҳад, ки мо ба чӣ омадаем:
Тавре ки шумо мебинед, нусхаи эҳтиётии аввал оҳиста (70 Мб/с) сурат гирифт ва нусхабардории минбаъдаи ҳамон системаҳо хеле тезтар буд.
Дарвоқеъ, дар оянда тафсилоти каме бештар дар бораи кадом хусусиятҳо вуҷуд дорад.
Гузоришҳои эҳтиётӣ барои онҳое, ки омодаанд ним саҳифаи партовро хонандПурра бо бознигарии
18 декабри соли 2018 12:09:43 PM — Info bpbkar (pid=4452) акселератор аз 14883996160 байтро аз 14883994624 байт ба сервер фиристод, оптимизатсия 0.0%
18 декабри соли 2018 12:10:07 - Маълумоти NBCC (pid=23002) StorageServer=PureDisk_rhceph_rawd:s3.cloud.ngn.com.tr; Ҳисобот = Омори PDDO (ҷараёни чанд ришта истифода шудааст) барои (NBCC): сканшуда: 14570817 KB, CR ирсолшуда: 1760761 KB, CR фиристодашуда аз ФК: 0 КБ, тозакунӣ: 87.9%, кэш ғайрифаъол аст
пур
18 декабри соли 2018 12:13:18 PM — Info bpbkar (pid=2864) акселератор аз 181675008 байтро аз 14884060160 байт ба сервер фиристод, оптимизатсия 98.8%
18 декабри соли 2018 12:13:40 - Маълумоти NBCC (pid=23527) StorageServer=PureDisk_rhceph_rawd:s3.cloud.ngn.com.tr; Ҳисобот = Омори PDDO барои (NBCC): сканшуда: 14569706 KB, CR ирсолшуда: 45145 KB, CR тавассути FC фиристода: 0 KB, тозакунӣ: 99.7%, кэш ғайрифаъол аст
Инкассатсия
18 декабри соли 2018 12:15:32 PM — Info bpbkar (pid=792) акселератор аз 9970688 байтро аз 14726108160 байт ба сервер фиристод, оптимизатсия 99.9%
18 декабри соли 2018 12:15:53 - Маълумоти NBCC (pid=23656) StorageServer=PureDisk_rhceph_rawd:s3.cloud.ngn.com.tr; Ҳисобот = Омори PDDO барои (NBCC): сканшуда: 14383788 KB, CR ирсолшуда: 15700 KB, CR тавассути FC фиристода: 0 KB, тозакунӣ: 99.9%, кэш ғайрифаъол аст
пур
18 декабри соли 2018 12:18:02 PM — Info bpbkar (pid=3496) акселератор аз 171746816 байтро аз 14884093952 байт ба сервер фиристод, оптимизатсия 98.8%
18 декабри соли 2018 12:18:24 - Маълумоти NBCC (pid=23878) StorageServer=PureDisk_rhceph_rawd:s3.cloud.ngn.com.tr; Ҳисобот = Омори PDDO барои (NBCC): сканшуда: 14569739 KB, CR ирсолшуда: 34120 KB, CR тавассути FC фиристода: 0 KB, тозакунӣ: 99.8%, кэш ғайрифаъол аст
Мушкил чист
Мизоҷон мехоҳанд, ки ҳарчи зудтар нусхабардорӣ кунанд ва онҳоро ба қадри имкон арзон нигоҳ доранд. Беҳтар аст, ки онҳоро дар анборҳои объектӣ ба монанди S3 арзон нигоҳ доред, зеро онҳо аз рӯи арзиши хидмат барои як мегабайт арзонтарин мебошанд, ки шумо метавонед нусхаи эҳтиётиро дар муддати мувофиқ баргардонед. Вақте ки нусхаи эҳтиётӣ зиёд аст, он хеле арзон намешавад, зеро қисми зиёди захираро нусхаҳои ҳамон маълумот ишғол мекунанд. Дар мавриди HaaS ҳамкорони туркӣ, нигоҳдорӣ метавонад тақрибан 80-90% зич карда шавад. Равшан аст, ки ин ба вижагиҳои онҳо дахл дорад, аммо ман бешубҳа ба ҳадди аққал 50% бобо умед мебандам.
Барои ҳалли мушкилот, фурӯшандагони асосӣ дер боз дарвозаҳои Amazon S3 сохтанд. Ҳамаи усулҳои онҳо бо S3 маҳаллӣ мувофиқанд, то он даме, ки онҳо Amazon API-ро дастгирӣ мекунанд. Дар маркази додаҳои Туркия, нусхабардории S3-и мо ва инчунин дар T-III "Компрессор" дар Русия сохта шудааст, зеро ин схемаи кор барои мо хуб кор кардааст.
Ва S3-и мо бо усулҳои эҳтиётии Amazon S3 комилан мувофиқ аст. Яъне, ҳама асбобҳои эҳтиётӣ, ки ин усулҳоро дастгирӣ мекунанд, ба шумо имкон медиҳанд, ки ҳама чизро ба чунин анбор "аз қуттӣ" нусхабардорӣ кунед.
Veritas NetBackup хусусияти CloudCatalyst -ро илова кард:
Яъне, дар байни мошинҳое, ки бояд нусхабардорӣ карда шаванд ва шлюз, сервери фосилавии Linux мавҷуд аст, ки тавассути он трафики эҳтиётӣ аз агентҳои SRK мегузарад ва пеш аз интиқоли он ба S3 дар парвоз нусхабардорӣ карда мешавад. Агар пештар 30 нусхаи эҳтиётии 20 ГБ бо фишурда вуҷуд дошта бошад, ҳоло (аз сабаби монанд будани мошинҳо) ҳаҷми онҳо 90% хурдтар шудааст. Муҳаррики нусхабардорӣ ҳамон тавре истифода мешавад, ки ҳангоми нигоҳдорӣ дар дискҳои муқаррарӣ бо истифода аз Netbackup.
Ин аст он чизе ки пеш аз сервери мобайнӣ рӯй медиҳад:
Мо озмоиш кардем ва ба хулосае омадем, ки вақте ки дар марказҳои додаҳои мо татбиқ карда мешавад, ин барои мо ва муштариён ҷойро дар нигаҳдории S3 сарфа мекунад. Ҳамчун соҳиби марказҳои иттилоотии тиҷоратӣ, мо, албатта, аз рӯи ҳаҷми ишғолшуда пардохт мекунем, аммо ин барои мо ҳам хеле фоиданок аст - зеро мо пул кор карданро дар ҷойҳои миқёспазиртари нармафзор оғоз мекунем, на аз иҷораи сахтафзор. Хуб, ва ин коҳиши хароҷоти дохилӣ аст.
Гузоришҳо228 Ҷойҳо (0 Дар навбат 0 Фаъол 0 Интизори кӯшиши такрорӣ 0 Боздошташуда 0 Нопурра 228 Анҷом — 13 интихобшуда)
(Филтр истифода шудааст [13])
Намуди ID-и кор Навъи Ҳолат Тафсилоти Ҳолат Сиёсати кор Ҷадвали кор Муштарии медиа-Сервер Вақти оғозёбӣ Вақти анҷоми вақти нигаҳдорӣ Воҳиди кӯшиши амалиёт Килобайтҳо Файлҳо Номи роҳ % Анҷом (Таҳминшуда) Соҳиби кор PID Нусхабардории ID кори волидайн КБ/Сек Фаъол Оғози фаъол Профили гузаштаи Robot Vault. Медиа ID барои хориҷ кардани ҳаракати додаҳо аз навъи ғайри ҳост Мастер афзалияти такрорӣ суръати интиқоли суръатбахши оптимизатсияи мисол ё мубодилаи пойгоҳи додаҳо
— 1358 Snapshot Done 0 VMware — NGNCloudADC NBCC 18 декабри 2018 12:16:19 00:02:18 18 декабри 2018 12:18:37 PM STU_DP_S3_****захира 1 100c решаи 1358 18% :2018:12 PM 16:27:00 Диски барқароркунии фаврӣ WIN-************ 02
1360 Нусхаи эҳтиётӣ анҷом ёфт 0 VMware Full NGNCloudADC NBCC 18 декабри 2018 12:16:48 00:01:39 18 декабри 2018 12:18:27 PM STU_DP_S3_**** нусхаи эҳтиётӣ 1 14,535,248 root 149654 100 23858 1358 335,098 18 декабр , 2018 12:16:48 PM 00:01:39 Диски барқароркунии фаврӣ стандарти WIN-************ 0 99.8% 99%
1352 Snapshot Done 0 VMware - NGNCloudADC NBCC 18 декабри 2018 12:14:04 PM 00:02:01 18 декабри 2018 12:16:05 PM STU_DP_S3_****захира 1 100 решавӣ 1352 18%: 2018:12 PM 14:14:00 Диски барқарорсозии фаврӣ WIN-************ 01
1354 Нусхаи эҳтиётӣ анҷом дода шуд 0 VMware Incremental NGNCloudADC NBCC 18 декабри 2018 12:14:34 PM 00:01:21 18 декабри 2018 12:15:55 PM STU_DP_S3_****захира 1 14,380,965 root 147 100, 23617 1352 500,817 18 декабр , 2018 12:14:34 PM 00:01:21 Диски барқароркунии фаврӣ стандарти WIN-************ 0 99.9% 100%
1347 Snapshot Done 0 VMware - NGNCloudADC NBCC 18 декабри 2018 12:11:45 PM 00:02:08 18 декабри 2018 12:13:53 PM STU_DP_S3_****захира 1 100 решавӣ 1347 18%: 2018:12 PM 11:45:00 Диски барқарорсозии фаврӣ WIN-************ 02
1349 Нусхаи эҳтиётӣ анҷом ёфт 0 VMware Full NGNCloudADC NBCC 18 декабри 2018 12:12:02 00:01:41 18 декабри 2018 12:13:43 PM STU_DP_S3_**** нусхаи эҳтиётӣ 1 14,535,215 root 149653 100 23508 1347 316,319 18 декабр , 2018 12:12:02 PM 00:01:41 Диски барқароркунии фаврӣ стандарти WIN-************ 0 99.7% 99%
1341 Snapshot Done 0 VMware - NGNCloudADC NBCC 18 декабри 2018 12:05:28 PM 00:04:53 18 декабри 2018 12:10:21 PM STU_DP_S3_****захира 1 100 решавӣ 1341 18%: 2018:12 PM 05:28:00 Диски барқарорсозии фаврӣ WIN-************ 04
1342 Нусхаи эҳтиётӣ анҷом ёфт 0 VMware Full_Rescan NGNCloudADC NBCC 18 декабри 2018 12:05:47 PM 00:04:24 18 декабри 2018 12:10:11 PM STU_DP_S3_****захира 1 14,535,151 149653 реша 100 22999 1341 70,380 декабр 18 , 2018 12:05:47 PM 00:04:24 Диски барқароркунии фаврӣ стандарти WIN-************ 0 87.9% 0%
1339 Намоиши фаврӣ анҷом дода шуд 150 VMware - NGNCloudADC NBCC 18 декабри 2018 11:05:46 AM 00:00:53 18 декабри 2018 11:06:39 AM STU_DP_S3_**** нусхаи 1 100% rootc:c:1339 18:2018 AM 11:05:46 Диски барқарорсозии фаврӣ WIN-************ 00
1327 Snapshot Done 0 VMware - *******.********.cloud NBCC 17 декабри 2018 12:54:42 05:51:38 17 декабри 2018 6:46:20 STU_DP_S3_**** нусхаи 1 100% реша 1327 17 декабри 2018 12:54:42 PM 05:51:38 Диски барқароркунии фаврӣ WIN-************ 0
1328 Нусхаи эҳтиётӣ анҷом ёфт 0 VMware Full *******.********.cloud NBCC 17 декабри 2018 12:55:10 05:29:21 17 декабри 2018 6:24:31 STU_DP_S3_****захира 1 222,602,719 258932 100% 12856 реша 1327 11,326 17 декабри 2018 12:55:10 05:29:21 Диски барқароркунии фаврӣ WIN-Disk *****0 *****87.9. 0%
1136 Snapshot Done 0 VMware - *******.********.cloud NBCC 14 декабри 2018 4:48:22 04:05:16 14 декабри 2018 8:53:38 STU_DP_S3_**** нусхаи 1 100% реша 1136 14 декабри 2018 4:48:22 PM 04:05:16 Диски барқароркунии фаврӣ WIN-************ 0
1140 Нусхаи эҳтиётӣ анҷом ёфт 0 VMware Full_Scan *******.********.cloud NBCC 14 декабри 2018 4:49:14 03:49:58 14 декабри 2018 8:39:12 STU_DP_S3_****захира 1 217,631,332 255465 100% 26438 реша 1136 15,963 14 декабри 2018 4:49:14 PM 03:49:58 Диски барқарорсозии фаврӣ *****0 * * * * * * * * * * * * * * * * * * * * * * Нусхаи эҳтиётӣ. 45.2%
Суръат ба шумо имкон медиҳад, ки трафикро аз агентҳо кам кунед, зеро Танҳо тағиротҳои додаҳо интиқол дода мешаванд, яъне ҳатто нусхаҳои эҳтиётии пурра пурра бор карда намешаванд, зеро сервери медиа нусхаҳои эҳтиётии пурраи минбаъдаро аз нусхаҳои афзоянда ҷамъоварӣ мекунад.
Сервери мобайнӣ дорои нигаҳдории худро дорад, ки дар он "кэш" -и маълумотро менависад ва пойгоҳи додаҳоро барои нусхабардорӣ нигоҳ медорад.
Архитектураи пурра чунин менамояд:
- Сервери асосӣ конфигуратсия, навсозӣ ва ғайраро идора мекунад ва дар абр ҷойгир аст.
- Сервери медиа (мошини мобайнӣ * nix) бояд аз ҷиҳати дастрасии шабака ба системаҳои зиёдатӣ наздиктарин ҷойгир бошад. Дар ин ҷо нусхабардории нусхаҳои эҳтиётӣ аз ҳама мошинҳои ҳифзшуда анҷом дода мешавад.
- Дар мошинҳои эҳтиётӣ агентҳо мавҷуданд, ки одатан ба сервери медиа танҳо он чизеро мефиристанд, ки дар нигаҳдории он нест.
Ҳамааш аз сканкунии пурра оғоз мешавад - ин нусхаи пурраи пурра аст. Дар ин лаҳза, сервери медиа ҳама чизро мегирад, онро нусхабардорӣ мекунад ва ба S3 интиқол медиҳад. Суръат ба сервери медиа паст аст, аммо аз он баландтар аст. Маҳдудияти асосӣ қудрати ҳисоббарории сервер мебошад.
Нусхаҳои зерин аз нуқтаи назари ҳама системаҳо пурра карда мешаванд, аммо дар асл онҳо ба нусхаҳои пурраи синтетикӣ монанданд. Яъне, интиқол ва сабти воқеӣ ба сервери медиа танҳо аз он блокҳои додаҳо рух медиҳад, ки то ҳол дар нусхаҳои эҳтиётии VM дучор нашудаанд. Ва танҳо он блокҳои додаҳо, ки хэши онҳо дар пойгоҳи додаҳои нусхабардории сервери медиа нестанд, интиқол ва дар S3 сабт карда мешаванд. Ба ибораи соддатар, ин чизест, ки қаблан дар ягон нусхаи эҳтиётии як VM дида нашудааст.
Ҳангоми барқарорсозӣ сервери медиа аз S3 объектҳои зарурии нусхабардориро дархост мекунад, онҳоро регидрат мекунад ва ба агентҳои IRB интиқол медиҳад, яъне. хангоми баркароркунй хачми трафикро ба назар гирифтан лозим аст, ки он ба хачми вокеии маълумотхои баркароршаванда баробар хохад шуд.
Ин аст, ки чӣ гуна он назар мекунад:
Ва инак боз як пораи чӯбдаст169 Ҷойҳо (0 Дар навбат 0 Фаъол 0 Интизори кӯшиши такрорӣ 0 Боздошташуда 0 Нопурра 169 Анҷом — 1 интихобшуда)
Намуди ID-и кор Навъи Ҳолат Тафсилоти Ҳолат Сиёсати кор Ҷадвали кор Муштарии медиа-Сервер Вақти оғозёбӣ Вақти анҷоми вақти нигаҳдорӣ Воҳиди кӯшиши амалиёт Килобайтҳо Файлҳо Номи роҳ % Анҷом (Таҳминшуда) Соҳиби кор PID Нусхабардории ID кори волидайн КБ/Сек Фаъол Оғози фаъол Профили гузаштаи Robot Vault. Медиа ID барои хориҷ кардани ҳаракати додаҳо аз навъи ғайри ҳост Мастер афзалияти такрорӣ суръати интиқоли суръатбахши оптимизатсияи мисол ё мубодилаи пойгоҳи додаҳо
- 1372 Барқароркунӣ анҷом дода шуд 0 NBPR01 NBCC 19 декабр 2018 1:05:58 PM 00:04:32 19 декабр 2018 1:10:30 PM 1 14,380,577 1 100% OT 8548, RO1372. 70,567 19:2018 : 1 PM 06: 00: 00 БУРД - *********** 04
Якпорчагии маълумот тавассути муҳофизати худи S3 таъмин карда мешавад - дар он ҷо барои муҳофизат аз нокомии сахтафзор ба монанди шпиндели мурдаи диски сахт захираи хуб мавҷуд аст.
Сервери медиа ба 4 ТБ кэш ниёз дорад - ин тавсияи ҳадди ақали андозаи Veritas аст. Бештар беҳтар аст, аммо мо ин корро кардем.
Натиҷа
Вақте ки шарик 3 ГБ-ро ба S20-и мо партофт, мо 60 ГБ захира кардем, зеро мо захираи гео-сегонаи маълумотро таъмин мекунем. Ҳоло трафик хеле кам шудааст, ки ин ҳам барои канал ва ҳам барои тарофаҳои нигоҳдорӣ хуб аст.
Дар ин ҳолат, масирҳо пас аз "интернети калон" баста мешаванд, аммо шумо метавонед трафикро тавассути VPN L2 тавассути Интернет интиқол диҳед, аммо беҳтар аст, ки сервери медиаро пеш аз даромадгоҳи провайдер насб кунед.
Агар шумо дар бораи ин хусусиятҳо дар марказҳои маълумотии Русияи мо маълумот дошта бошед ё дар бораи татбиқи хона саволҳо дошта бошед, дар шарҳҳо ё тавассути почтаи электронӣ пурсед. [почтаи электронӣ ҳифз карда шудааст].
Манбаъ: will.com