Korišćenje sistema za skladištenje podataka u radu sa medijskim sadržajem

Teško je zamisliti savremeni svijet bez obilja medijskih sadržaja, predstavljenih, između ostalog, u obliku audio i video podataka. Čini se da je tek nedavno krajnji san bila kolekcija MP3 fajlova. A danas se video fajlovi sa 4K rezolucijom već doživljavaju kao nešto obično. Sav ovaj medijski sadržaj treba kreirati, postaviti negdje i onda učiniti dostupnim svima. Savremeni sistemi za skladištenje podataka (i Qsan uključujući) savršeno su prikladni kao jedan od glavnih alata za rad sa sadržajem.

Korišćenje sistema za skladištenje podataka u radu sa medijskim sadržajem

Naravno, glavni potrošači kapaciteta i propusnosti komunikacijskih kanala su video podaci. Stalno povećanje rezolucije video okvira povećava zahtjeve za hardverom. Kao rezultat toga, oprema koja je i jučer bila aktuelna brzo zastareva. Uostalom, tipičan prelazak na sljedeću generaciju rezolucije podrazumijeva četverostruko povećanje broja tačaka u kadru. Kao rezultat toga, samo jedan minut nekomprimovanog 8K videa zauzima više od 100 GB.

Danas profesionalni rad sa video sadržajem visoke definicije više nije prerogativ samo velikih studija. Rastuća popularnost TV serija, streaminga i televizije visoke definicije privlači sve više igrača u ovaj posao. Svi ovi studiji konstantno generišu ogromnu količinu „sirovog“ materijala koji zahteva dalju obradu.

Korišćenje sistema za skladištenje podataka u radu sa medijskim sadržajem

Desilo se da su većina radnika u industriji proizvodnje sadržaja kreativni ljudi. A među njima, glavni pristup rješavanju tehničkih problema vezanih za rad s diskovnim kapacitetom bio je kupovina novih eksternih diskova. U pravilu su svoju ulogu imali desktop NAS modeli sa 2-5 diskova. Izbor NAS zbog jednostavnih i razumljivih procedura za njihov rad među netehničkim stručnjacima. Radna brzina je sasvim prihvatljiva kada se koristi pojedinačno kao DAS (posebno ako postoje interfejsi kao što su Thunderbolt ili USB 3.0). Ako trebate dijeliti podatke, takav NAS (aka DAS) jednostavno je povezan s drugom radnom stanicom.

Sa sve većim obimom izvornog materijala i povećanjem broja radnika uključenih u njegovu obradu, ovaj pristup (nazovimo ga „tradicionalnim“) jasno pokazuje svoju nedosljednost. Ne samo da se broj „kutija“ naglo povećava (i u isto vrijeme troškovi njihove kupovine), već se naglo smanjuje i pogodnost pristupa podacima. A kada radite zajedno, problemi izbijaju kao iz rog izobilja: sukobi u pristupu podacima, nedovoljna brzina itd. Stoga se „tradicionalni“ pristup sve više zamjenjuje modernijim rješenjima zasnovanim na centraliziranoj pohrani (ili nekoliko skladišta) i organiziranju zajedničkog pristupa. na sadržaj.

Naravno, samo kupovinom SHD Prelazak na novi koncept rada sa sadržajem tu se ne završava. Također će biti potrebno organizirati zajednički pristup podacima i osigurati brzu razmjenu između čvorova za skladištenje i obradu sadržaja. Može postojati nekoliko primjera izgradnje infrastrukture za obradu sadržaja. Glavni su sljedeći:

  1. Najjednostavniji kofer za male studije. Za organiziranje pristupa podacima koriste se protokoli datoteka čiji je rad osiguran funkcionalnost samog sistema za skladištenje podataka.

    Korišćenje sistema za skladištenje podataka u radu sa medijskim sadržajem

  2. Studiji srednje veličine u kojima se istovremeno radi na nekoliko projekata. Ovdje bi razuman izbor bio organizirati pristup podacima preko skupa servera. U ovom slučaju moguće je implementirati pristup sadržaju koji je otporan na greške 24/7 dupliranjem svih ključnih komponenti: servera, komunikacionih kanala, prekidača i kontrolera za skladištenje podataka. Stalni pristup podacima izuzetno je bitan pri dugotrajnoj obradi video materijala, jer niko ne želi da izgubi ogromnu količinu vremena, na primer, zbog kvara u procesu renderovanja. Takođe, ako imate skup servera, moguće je obezbediti balansiranje opterećenja za radne stanice kako bi se poboljšale ukupne performanse.

    Korišćenje sistema za skladištenje podataka u radu sa medijskim sadržajem

  3. Veliki studiji, uključujući i one koji imaju za cilj široko emitovanje. U takvim projektima, otpornost na greške zbog dupliranja komponenti već je neophodna. Takođe, radi ubrzanja, svi glavni resursno intenzivni procesi renderovanja i postprocesiranja prebačeni su sa radnih stanica na specijalne servere koji imaju najbrži pristup sistemima za skladištenje sadržaja. Štaviše, često se koristi skladištenje podataka na više nivoa. One. spori ali prostrani HDD-ovi se koriste za skladištenje izvornih materijala i arhiva, kao i brzi SSD-ovi za operativni rad i/ili keširanje. U okviru jedinstvenog sistema za skladištenje podataka, kreirano je nekoliko pulova u tu svrhu od različitih vrsta medija, kao i automatizovanih alata kao npr. AutoTiering и SSD predmemorija. U zaista velikim projektima, skladištenje na više nivoa postiže se upotrebom nekoliko sistema za skladištenje, od kojih svaki pohranjuje specifičan tip podataka.

    Korišćenje sistema za skladištenje podataka u radu sa medijskim sadržajem

Kao primjer implementacije rada medijskog studija naveli bismo organizaciju procesa obrade sadržaja na jednoj od televizijskih stanica na Tajvanu. Ovdje se primjenjuje razumno dovoljna shema za izgradnju sistema, opisana u paragrafu 2.

Sav medijski sadržaj se pohranjuje na sistemu za skladištenje Qsan XS5224-D i JBOD polica za proširenje XD5324-D. Šasija i polica su opremljeni sa 24 NL-SAS drajva sa kapacitetom od 14 TB svaki. Konfiguracija prostora na disku:

  • Skladište - bazen 24x RAID60
  • Polica za proširenje – 22x RAID60 bazen. 2 x vrući rezervni

Pul servera za omogućavanje pristupa podacima je klaster od 4 servera zasnovana na Windows Serveru. Pristup sadržaju je organizovan preko CIFS protokola. Fizički, sva 4 servera imaju konekciju sa sistemom za skladištenje preko Fiber Channel 16G bez upotrebe prekidača, na sreću, sistem za skladištenje ima dovoljno portova za ovo. Klijenti pristupaju grupi servera preko 10GbE mreže. Klijenti koriste softver Edius v9 u Windows okruženju. Vrste opterećenja:

  • Radite sa 4K videom na 7 streamova – 2 klijenta
  • Radite sa 2K videom za 13 streamova – 10 klijenata

Kao rezultat, pod navedenim opterećenjima, sistem pruža stabilne ukupne performanse od 1500 MB/s, što je ugodno za trenutni rad televizijske stanice. Ukoliko je potrebno povećati prostor na disku, kupac samo treba dodati dodatne police i proširiti postojeći niz novim diskovima. Naravno, sve ove operacije se mogu obavljati online bez prekidanja radnih procesa.

Mediji su oduvijek igrali važnu ulogu u životu društva. Danas je to primjetnije nego ikad zbog razvoja streaminga i industrije zabave. „Teški“ sadržaj zahteva ozbiljan pristup prilikom kreiranja rešenja za njegovu obradu. A jedan od važnih elemenata u takvom rješenju je diskovni podsistem. Skladištenje savršeno odgovara ovoj ulozi, pružajući pouzdan pristup velikom brzinom i jednostavno proširenje i performanse.

izvor: www.habr.com

Dodajte komentar