Ahoana ny fomba fitehirizana ny backups amin'ny fitahirizana zavatra hatramin'ny 90%

Nangataka anay ny mpanjifa Tiorka mba hanitsy tsara ny backup ho an'ny foibe angon-dry zareo. Manao tetikasa mitovy amin'izany izahay any Rosia, fa eto ny tantara dia bebe kokoa momba ny fikarohana ny fomba tsara indrindra hanaovana izany.

Raha jerena: misy fitahirizana S3 eo an-toerana, misy Veritas NetBackup, izay nahazo fiasa vaovao nitarina ho an'ny famindrana angon-drakitra mankany amin'ny fitehirizana zavatra, miaraka amin'ny fanohanana ny deduplication, ary misy olana amin'ny toerana malalaka ao amin'ity fitahirizana eo an-toerana ity.

Asa: hanao ny zava-drehetra mba ho haingana sy mora ny fizotran'ny fitahirizana kopia backup.

Raha ny marina, talohan'izay, ny zava-drehetra ao amin'ny S3 dia rakitra tsotra fotsiny, ary ireo dia feno an'ireo milina manakiana ny foibe data. Izany hoe, tsy tena optimized, fa ny zava-drehetra dia niasa tany am-piandohana. Fotoana izao handinihana izany sy hanaovana izany tsara.

Ny sary dia mampiseho ny zavatra tonganay:

Ahoana ny fomba fitehirizana ny backups amin'ny fitahirizana zavatra hatramin'ny 90%

Araka ny hitanao dia natao miadana ny backup voalohany (70 Mb/s), ary haingana kokoa ny backups an'ireo rafitra ireo.

Raha ny marina, misy antsipiriany bebe kokoa momba ny endri-javatra misy.

Diarin'ny backup ho an'ireo izay vonona hamaky ny antsasaky ny pejy fanariam-pakoFeno rescan
Dec 18, 2018 12:09:43 PM β€” Info bpbkar (pid=4452) accelerator nandefa 14883996160 bytes amin'ny 14883994624 bytes mankany amin'ny server, optimization 0.0%
Dec 18, 2018 12:10:07 PM - Info NBCC (pid=23002) StorageServer=PureDisk_rhceph_rawd:s3.cloud.ngn.com.tr; Tatitra=PDDO Stats (maro-threaded stream ampiasaina) ho an'ny (NBCC): notarafina: 14570817 KB, CR nalefa: 1760761 KB, CR nalefa tamin'ny FC: 0 KB, dedup: 87.9%, cache disabled

Full
Dec 18, 2018 12:13:18 PM β€” Info bpbkar (pid=2864) accelerator nandefa 181675008 bytes amin'ny 14884060160 bytes mankany amin'ny server, optimization 98.8%
Dec 18, 2018 12:13:40 PM - Info NBCC (pid=23527) StorageServer=PureDisk_rhceph_rawd:s3.cloud.ngn.com.tr; Report=PDDO Stats for (NBCC): notarafina: 14569706 KB, CR nalefa: 45145 KB, CR nalefa tamin'ny FC: 0 KB, dedup: 99.7%, cache disabled

mitombo miandalana,
Dec 18, 2018 12:15:32 PM β€” Info bpbkar (pid=792) accelerator nandefa 9970688 bytes amin'ny 14726108160 bytes mankany amin'ny server, optimization 99.9%
Dec 18, 2018 12:15:53 PM - Info NBCC (pid=23656) StorageServer=PureDisk_rhceph_rawd:s3.cloud.ngn.com.tr; Report=PDDO Stats for (NBCC): notarafina: 14383788 KB, CR nalefa: 15700 KB, CR nalefa tamin'ny FC: 0 KB, dedup: 99.9%, cache disabled

Full
Dec 18, 2018 12:18:02 PM β€” Info bpbkar (pid=3496) accelerator nandefa 171746816 bytes amin'ny 14884093952 bytes mankany amin'ny server, optimization 98.8%
Dec 18, 2018 12:18:24 PM - Info NBCC (pid=23878) StorageServer=PureDisk_rhceph_rawd:s3.cloud.ngn.com.tr; Report=PDDO Stats for (NBCC): notarafina: 14569739 KB, CR nalefa: 34120 KB, CR nalefa tamin'ny FC: 0 KB, dedup: 99.8%, cache disabled

Inona no olana

Ny mpanjifa dia maniry ny hanao backups matetika araka izay azo atao ary mitahiry azy ireo mora araka izay azo atao. Ny tsara indrindra dia ny mitahiry azy ireo mora amin'ny fitahirizana zavatra toy ny S3, satria izy ireo no mora indrindra amin'ny vidin'ny serivisy isaky ny Megabyte izay ahafahanao manodina backup ao anatin'ny fotoana mety. Rehefa be dia be ny backup dia lasa tsy dia mora loatra izany, satria ny ankamaroan'ny fitahirizana dia misy dika mitovy amin'ny data. Raha ny momba ny HaaS an'ny mpiara-miasa Tiorka, ny fitahirizana dia mety ho 80-90% eo ho eo. Mazava fa mifandraika manokana amin'ny mombamomba azy ireo izany, saingy azo antoka fa hiantehitra amin'ny dadabe 50% farafaharatsiny aho.

Mba hamahana ny olana dia efa ela ireo mpivarotra lehibe no nanao vavahady mankany amin'ny Amazon S3. Mifanaraka amin'ny S3 eo an-toerana ny fomba rehetra ananany raha toa ka manohana ny Amazon API izy ireo. Ao amin'ny foibe angon-drakitra Tiorka, ny backup dia natao ho an'ny S3, ary koa ao amin'ny T-III "Compressor" any Rosia, satria niasa tsara ho antsika ity tetik'asa ity.

Ary ny S3 dia mifanaraka tanteraka amin'ny fomba backup Amazon S3. Izany hoe, ireo fitaovana backup rehetra izay manohana ireo fomba ireo dia ahafahanao mandika ny zava-drehetra amin'ny fitahirizana toy izany "ao anaty boaty".

Veritas NetBackup dia nanampy ny endri-javatra CloudCatalyst:

Ahoana ny fomba fitehirizana ny backups amin'ny fitahirizana zavatra hatramin'ny 90%

Izany hoe, eo anelanelan'ny milina mila averina sy ny vavahady, dia misy mpizara Linux mpanelanelana izay mandalo ny fifamoivoizana backup avy amin'ireo mpiasan'ny SRK ary nesorina amin'ny lalitra alohan'ny hamindrana azy amin'ny S3. Raha teo aloha dia nisy 30 backups an'ny 20 GB miaraka amin'ny famatrarana, ankehitriny (noho ny fitovizan'ny milina) dia nanjary 90% ny habeny. Ny motera deduplication dia ampiasaina mitovy amin'ny rehefa mitahiry amin'ny kapila mahazatra mampiasa Netbackup.

Izao no mitranga alohan'ny mpizara mpanelanelana:

Ahoana ny fomba fitehirizana ny backups amin'ny fitahirizana zavatra hatramin'ny 90%

Nanandrana izahay ary tonga tamin'ny fanatsoahan-kevitra fa rehefa ampiharina ao amin'ny ivon-tsarimihetsika dia mitahiry toerana amin'ny fitahirizana S3 ho anay sy ho an'ny mpanjifa izany. Amin'ny maha-tompon'ny foibe angon-drakitra ara-barotra, mazava ho azy, dia mandoa araka ny habetsahan'ny olona izahay, saingy mbola mahasoa antsika ihany koa - satria manomboka mahazo vola amin'ny toerana azo tsapain-tanana kokoa amin'ny rindrambaiko, fa tsy amin'ny fanofana fitaovana. Eny ary izany dia fampihenana ny fandaniana anatiny.

hazoAsa 228 (0 nilahatra 0 mavitrika 0 miandry andrana indray 0 naato 0 tsy vita 228 vita β€” 13 voafantina)
(Sivana nampiharina [13])

Karazana Id momba ny asa State State Details Sata Politika momba ny asa Fandaharam-potoanan'ny Mpizara Media Mpanjifa fotoana fanombohana ny fotoana fiafaran'ny fotoana fitehirizam-bokatra Andrana Fampandehanana Kilobytes Files Anaran'ny lalana % Feno (Tombanana) Asa PID Owner Copy ray aman-dreny Job ID KB/sec Active Start Active Elapsed Robot Vault Profile session ID Media hanilika ny hetsiky ny angona any ivelan'ny Host Type Master Priority Deduplication tahan'ny Transport Accelerator Optimization Instance na Database Share Host
β€” 1358 Snapshot vita 0 VMware β€” NGNCloudADC NBCC Dec 18, 2018 12:16:19 PM 00:02:18 Dec 18, 2018 12:18:37 PM STU_DP_S3_****backup 1 100% Dec 1358% root :18:2018 PM 12:16:27 Instant Recovery Disk Standard WIN-********** 00
1360 Backup vita 0 VMware Full NGNCloudADC NBCC Dec 18, 2018 12:16:48 PM 00:01:39 Dec 18, 2018 12:18:27 PM STU_DP_S3_****backup 1 14,535,248 149654 100 23858 1358 335,098 18 Desambra , 2018 12:16:48 PM 00:01:39 Instant Recovery Disk Standard WIN-********** 0 99.8% 99%
1352 Snapshot vita 0 VMware - NGNCloudADC NBCC Dec 18, 2018 12:14:04 PM 00:02:01 Dec 18, 2018 12:16:05 PM STU_DP_S3_****backup 1 100% 1352 Dec 18 2018:12 PM 14:14:00 Instant Recovery Disk Standard WIN-********** 01
1354 Backup vita 0 VMware Incremental NGNCloudADC NBCC Dec 18, 2018 12:14:34 PM 00:01:21 Dec 18, 2018 12:15:55 PM STU_DP_S3_****backup 1 14,380,965 147 Desambra 100 , 23617 1352:500,817:18 PM 2018:12:14 Instant Recovery Disk Standard WIN-********** 34 00% 01%
1347 Snapshot vita 0 VMware - NGNCloudADC NBCC Dec 18, 2018 12:11:45 PM 00:02:08 Dec 18, 2018 12:13:53 PM STU_DP_S3_****backup 1 100% 1347 Dec 18 2018:12 PM 11:45:00 Instant Recovery Disk Standard WIN-********** 02
1349 Backup vita 0 VMware Full NGNCloudADC NBCC Dec 18, 2018 12:12:02 PM 00:01:41 Dec 18, 2018 12:13:43 PM STU_DP_S3_****backup 1 14,535,215 149653 100 23508 1347 316,319 18 Desambra , 2018 12:12:02 PM 00:01:41 Instant Recovery Disk Standard WIN-********** 0 99.7% 99%
1341 Snapshot vita 0 VMware - NGNCloudADC NBCC Dec 18, 2018 12:05:28 PM 00:04:53 Dec 18, 2018 12:10:21 PM STU_DP_S3_****backup 1 100% 1341 Dec 18 2018:12 PM 05:28:00 Instant Recovery Disk Standard WIN-********** 04
1342 Backup vita 0 VMware Full_Rescan NGNCloudADC NBCC Dec 18, 2018 12:05:47 PM 00:04:24 Dec 18, 2018 12:10:11 PM STU_DP_S3_****backup 1 14,535,151 149653 100 22999 1341 Des 70,380, 18 2018:12:05 PM 47:00:04 Famerenana haingana Disk Standard WIN-************ 24 0% 87.9%

1339 Snapshot vita 150 VMware - NGNCloudADC NBCC Dec 18, 2018 11:05:46 AM 00:00:53 Dec 18, 2018 11:06:39 AM STU_DP_S3_****backup 1 100% Dec 1339, 18% root 2018 Dec 11:05 AM 46:00:00 Instant Recovery Disk Standard WIN-********** 53
1327 Snapshot vita 0 VMware - *******.********.cloud NBCC Dec 17, 2018 12:54:42 PM 05:51:38 Dec 17, 2018 6:46:20 PM STU_DP_S3_****backup 1 100% root 1327 Dec 17, 2018 12:54:42 PM 05:51:38 Instant Recovery Disk Standard WIN-*********** 0
1328 Backup vita 0 VMware Full *******.********.cloud NBCC Dec 17, 2018 12:55:10 PM 05:29:21 Dec 17, 2018 6:24:31 PM STU_DP_S3_****backup 1 222,602,719 258932 100% 12856 root 1327 11,326 Dec 17, 2018 12:55:10 PM 05:29:21 Instant Recovery Disk Standard WIN-***********. 0%
1136 Snapshot vita 0 VMware - *******.********.cloud NBCC Dec 14, 2018 4:48:22 PM 04:05:16 Dec 14, 2018 8:53:38 PM STU_DP_S3_****backup 1 100% root 1136 Dec 14, 2018 4:48:22 PM 04:05:16 Instant Recovery Disk Standard WIN-*********** 0
1140 Backup vita 0 VMware Full_Scan *******.********.cloud NBCC Dec 14, 2018 4:49:14 PM 03:49:58 Dec 14, 2018 8:39:12 PM STU_DP_S3_****backup 1 217,631,332 255465 100% 26438 root 1136 15,963 Dec 14, 2018 4:49:14 PM 03:49:58 Instant Recovery Disk Standard WIN-*********** 0 45.2%

Ny accelerator dia ahafahanao mampihena ny fifamoivoizana avy amin'ny mpandraharaha, satria Ny fiovan'ny angon-drakitra ihany no ampitaina, izany hoe na dia ny backup feno aza dia tsy ampidirina tanteraka, satria ny mpizara media dia manangona backup feno manaraka avy amin'ny backup incremental.

Ny mpizara mpanelanelana dia manana fitehirizana azy manokana, izay hanoratany "cache" ny angon-drakitra ary mitazona tahiry ho an'ny deduplication.

Toy izao ny maritrano feno:

  1. Ny mpizara master dia mitantana ny fanamafisana, ny fanavaozana, sns. ary hita ao amin'ny rahona.
  2. Ny lohamilina haino aman-jery (milina mpanelanelana *nix) dia tokony ho eo akaikin'ireo rafitra mihoa-pefy amin'ny resaka fidirana amin'ny tambajotra. Eto dia atao ny deduplication ny backups avy amin'ny milina voatokana rehetra.
  3. Ao amin'ny milina voaaro dia misy mpiasa izay mandefa amin'ny mpizara media fotsiny izay tsy ao anaty fitahirizana.

Izany rehetra izany dia manomboka amin'ny scan feno - ity dia backup feno feno. Amin'izao fotoana izao, ny mpizara media dia maka ny zava-drehetra, manala azy ary mamindra azy amin'ny S3. Ny hafainganam-pandeha mankany amin'ny mpizara media dia ambany, fa avy amin'izany dia avo kokoa. Ny fetra lehibe indrindra dia ny herin'ny informatika an'ny mpizara.

Ny backups manaraka dia vita amin'ny fomba fijerin'ny rafitra rehetra, fa raha ny marina dia toy ny backup feno synthetic izy ireo. Izany hoe, ny fifindrana sy ny firaketana an-tsoratra amin'ny mpizara media dia tsy misy afa-tsy amin'ireo sakana angon-drakitra izay mbola tsy nihaona tamin'ny backup VM taloha. Ary ireo sakana data izay tsy ao amin'ny angon-drakitra deduplication an'ny mpizara media ihany no afindra sy voarakitra ao amin'ny S3. Raha lazaina amin'ny teny tsotra dia zavatra mbola tsy hita tamin'ny backup an'ny VM tokana izany teo aloha.

Mandritra ny famerenana amin'ny laoniny, ny mpizara haino aman-jery dia mangataka ny zavatra ilaina amin'ny deduplicate amin'ny S3, manadio azy ireo ary mamindra azy ireo any amin'ny mpiasan'ny IRB, izany hoe. ilaina ny mandinika ny habetsaky ny fifamoivoizana mandritra ny famerenana amin'ny laoniny, izay hitovy amin'ny habetsaky ny angon-drakitra averina.

Toy izao ny endriny:

Ahoana ny fomba fitehirizana ny backups amin'ny fitahirizana zavatra hatramin'ny 90%

Ary ity misy tapa-kazo iray hafaAsa 169 (0 nilahatra 0 mavitrika 0 miandry andrana indray 0 naato 0 tsy vita 169 vita β€” 1 voafantina)

Karazana Id momba ny asa State State Details Sata Politika momba ny asa Fandaharam-potoanan'ny Mpizara Media Mpanjifa fotoana fanombohana ny fotoana fiafaran'ny fotoana fitehirizam-bokatra Andrana Fampandehanana Kilobytes Files Anaran'ny lalana % Feno (Tombanana) Asa PID Owner Copy ray aman-dreny Job ID KB/sec Active Start Active Elapsed Robot Vault Profile session ID Media hanilika ny hetsiky ny angona any ivelan'ny Host Type Master Priority Deduplication tahan'ny Transport Accelerator Optimization Instance na Database Share Host
- 1372 Famerenana Vita 0 NBPR01 NBCC Dec 19, 2018 1:05:58 PM 00:04:32 Dec 19, 2018 1:10:30 PM 1 14,380,577 1 100% 8548 Dec 1372 70,567 19 2018 1 06 00 00 04 Dec :30 PM 90000:XNUMX:XNUMX WIN-********** XNUMX

Ny fahamarinan'ny angona dia azo antoka amin'ny fiarovana ny S3 mihitsy - misy ny famerenam-bidy tsara ao mba hiarovana amin'ny tsy fahombiazan'ny fitaovana toy ny spindle hard drive maty.

Mila cache 4 TB ny mpizara media - ity no tolo-kevitry ny haben'ny Veritas kely indrindra. Ny bebe kokoa no tsara kokoa, fa izany no nataonay.

Ny vokany

Rehefa nisy mpiara-miombon'antoka nanipy 3 GB tao amin'ny S20 anay, dia nitahiry 60 GB izahay, satria manome angon-drakitra telo-jeografika izahay. Ankehitriny dia vitsy kokoa ny fifamoivoizana, izay tsara ho an'ny fantsona sy ho an'ny saram-pitahirizana.

Amin'ity tranga ity, mihidy ny lalana amin'ny alΓ lan'ny "Internet lehibe", fa afaka mitondra fifamoivoizana amin'ny VPN L2 amin'ny Internet ianao, fa tsara kokoa ny mametraka ny lohamilina media alohan'ny hidiran'ny mpamatsy.

Raha liana amin'ny fianarana momba ireo endri-javatra ireo ao amin'ny foibe angon-drakitra Rosiana ianao na manana fanontaniana momba ny fampiharana ao an-trano, anontanio ao amin'ny fanehoan-kevitra na amin'ny mailaka [email voaaro].

Source: www.habr.com

Add a comment