Uporaba shranjevanja podatkov pri delu z medijskim vsebinami

Svet današnjice je teško zamisliti bez obilja medijskih sadržaja, koji se, između ostalog, predstavljaju u obliku audio i video podataka. Činilo se da je još nedavno granica snova bila kolekcija MP3 fajlova. A danas se video fajlovi rezolucije 4K već doživljavaju kao nešto uobičajeno. Sav ovaj medijski sadržaj treba stvoriti, negde smestiti, a zatim omogućiti pristup. Savremeni sistemi za skladištenje podataka (i Qsan među ostalim) su kao stvoreni kao jedan od glavnih alata za rad sa sadržajem.

Uporaba shranjevanja podatkov pri delu z medijskim vsebinami

Naravno, glavni potrošači kapaciteta i propusnosti komunikacionih kanala su video podaci. Stalni rast rezolucije video kadra povećava zahteve prema „hardveru“. Kao rezultat toga, ono što je juče bilo relevantno, brzo postaje zastarelo. Tipična promena ka sledećoj generaciji razlučivosti podrazumeva povećanje broja tačaka u kadru četiri puta. Kao rezultat, samo jedna minuta video zapisa rezolucije 8K u nekomprimovanom formatu zauzima više od 100GB.

Danas profesionalni rad sa video sadržajem visoke rezolucije više nije privilegija samo velikih studija. Rastuća popularnost serija, striming servisa i televizije visoke definicije privlači sve veći broj učesnika u ovaj biznis. Svi ovi studiji konstantno generišu ogromne količine „sirovog“ materijala koji zahteva dalju obradu.

Uporaba shranjevanja podatkov pri delu z medijskim vsebinami

Ispostavilo se da je većina radnika u industriji proizvodnje sadržaja kreativna. Među njima, osnovni pristup za rešavanje tehničkih problema u vezi sa radom sa diskovnim kapacitetima bio je kupovina novih spoljašnjih uređaja za skladištenje. Obično su to bili desktop NAS modeli sa 2-5 diskova. Izbor NAS je uslovljen jednostavnim i razumljivim postupcima za njihovu upotrebu među netehničkim stručnjacima. Brzina rada je prihvatljiva za individualnu upotrebu kao DAS (posebno u prisustvu interfejsa poput Thunderbolt ili USB 3.0). U slučaju potrebe za zajedničkim pristupom podacima, takav NAS (tj. DAS) jednostavno se povezuje sa drugom radnom stanicom.

S povečanim obsegom izvirnega materiala in naraščanjem števila delavcev, ki so vključeni v njegovo obdelavo, tak pristop (imenovali ga bomo 'tradicionalni') vse bolj kaže svojo neučinkovitost. Poleg tega, da se število 'škatel' močno povečuje (skupaj s tem tudi stroški za njihovo pridobitev), se močno zmanjšuje dostopnost podatkov. Pri skupnem delu pa se težave pojavljajo kot iz roga obilja: konflikti pri dostopu do podatkov, nezadostna hitrost itd. Zato 'tradicionalni' pristop vse pogosteje nadomeščajo sodobnejše rešitve, ki temeljijo na centraliziranem shranjevanju (ali več shranjevanjih) in organizaciji skupnega dostopa do vsebine.

Seveda, zgolj z nakupom SAN prehod na novo koncept delo z vsebino ne konča. Prav tako bo potrebno organizirati skupni dostop do podatkov in zagotoviti visoko hitrost prenosa med shranjevanjem in vozlišči za obdelavo vsebine. Primeri postavitve infrastrukture za obdelavo vsebine so lahko različni. Glavni med njimi so naslednji:

  1. Najpreprostejši primer za majhne studije. Za organizacijo dostopa do podatkov se uporabljajo datotečni protokoli, katerih delovanje zagotavlja funkcionalnost samega SAN.

    Uporaba shranjevanja podatkov pri delu z medijskim vsebinami

  2. Srednje velike studije, kjer poteka sočasno delo na več projektih. Tukaj je smiselna izbira organizirati dostop do podatkov preko sklopa strežnikov. V tem primeru obstaja možnost uresničitve odpornosti na okvare pri dostopu do vsebine v načinu 24/7 s podvajanjem vseh ključnih komponent: strežnikov, komunikacijskih kanalov, stikal in krmilnikov SAN. Neprekinjen dostop do podatkov je izjemno pomemben pri dolgotrajni obdelavi video materiala, saj si nihče ne želi izgubljati ogromno časa, na primer, zaradi okvare v procesu upodabljanja. Prav tako omogoča obstoječi sklop strežnikov uravnoteženje obremenitve za delovne postaje s ciljem povečanja skupne zmogljivosti.

    Uporaba shranjevanja podatkov pri delu z medijskim vsebinami

  3. Velike studije, ki so usmerjene v široko oddajanje. V takih projektih je odpornost na napake zaradi podvajanja komponent že nujna. Prav tako so za pospešitev vsi glavnih procesi z visokim oblikovanjem in poobdelavo preneseni z delovnih postaj na posebne strežnike, ki imajo optimalno hitro dostopnost do shrambe s vsebinami. Poleg tega se pogosto uporablja večstopenjsko shranjevanje podatkov. T.j. uporabljajo se počasni, a prostorni HDD-ji za shranjevanje izvornih materialov in arhivov ter hitri SSD-ji za takojšnje delo in/ali predpomnjenje. V okviru enotne shrambe se za to ustvarjajo različni bazeni različnih tipov medijev, kot tudi se uporabljajo avtomatizirana sredstva, kot je AutoTiering in SSD predpomnilnik. V resnično obsežnih projektih se večstopenjsko shranjevanje doseže z uporabo več shrambe, pri čemer vsaka shranjuje opredeljeno vrsto podatkov.

    Uporaba shranjevanja podatkov pri delu z medijskim vsebinami

Kot primer delovanja medijske agencije želimo predstaviti organizacijo procesa obdelave vsebin na eni od televizijskih postaj na Tajvanu. Tu se uporablja razumno dovoljshema za gradnjo sistema, opisano v točki 2.

Vsa medijska vsebina se shranjuje na shrambo Qsan XS5224-D in razširitveni omarici JBOD XD5324-D. V ohišju in omarici je nameščenih po 24 NL-SAS diskov s 14TB kapaciteto vsak. Konfiguracija diskovnega prostora:

  • Shramba – bazen 24x RAID60
  • Razširitvena omarica - bazen 22x RAID60. 2 x hot spare

Bazen strežnikov za zagotavljanje dostopa do podatkov – klaster štirih strežnikov na osnovi Windows Server. Dostop do vsebine se organizira preko protokola CIFS. Fizično imajo vsi 4 strežniki povezavo s shrambo preko Fibre Channel 16G brez uporabe preklopnikov, kar pomeni, da je priključkov v shrambi dovolj. Dostop strank do bazena strežnikov se izvaja preko omrežja 10GbE. Na strankah se uporablja programska oprema Edius v9 v okolju Windows. Vrste obremenitev:

  • Delo z video 4K na 7 tokov – 2 stranki
  • Delo z video 2K na 13 tokov – 10 strank

Na koncu sistem ob zagotavljanju navedenih obremenitev omogoča stabilno skupno zmogljivost 1500 MB/s, kar je udobno za trenutno delovanje televizijske postaje. V primeru potrebe po povečanju diskovnega prostora, naročniku zadostuje, da dodajo dodatne omarice in razširijo obstoječi niz z novimi diski. Seveda, vse te operacije je mogoče izvesti v načinu online, brez prekinitev delovnih procesov.

Mediji so vedno igrali pomembno vlogo v življenju družbe. Danes je to še posebej očitno zaradi razvoja streaming platform in industrije zabave. „Težka“ vsebina zahteva resen pristop pri gradnji rešitev za njeno obdelavo. In eden od pomembnih elementov v takšni rešitvi je diskovni sistem. Sistem shranjevanja podatkov se odlično poda tej vlogi, saj zagotavlja zanesljiv in visokohitrostni dostop ter enostavno širitev in povečanje zmogljivosti.

Izvor: habr.com

Kupite zanesljivo gostovanje za spletne strani z zaščito pred DDoS, VPS VDS strežniki 🔥 Kupite zanesljivo gostovanje za spletne strani z zaščito pred DDoS, VPS VDS strežniki | ProHoster