A modern world is hard to imagine without a wealth of media content, including audio and video data. It seems like just yesterday that a collection of MP3 files was the pinnacle of dreams. Today, 4K video files are considered quite ordinary. All this media content needs to be created, stored somewhere, and then made accessible. Modern data storage systems (and indeed) are ideally suited as one of the main tools for working with content.
Of course, the main consumers of capacity and bandwidth in communication channels are video data. The constant increase in video frame resolution raises the requirements for hardware. As a result, equipment that was relevant yesterday quickly becomes outdated. A typical transition to the next generation of resolution leads to a fourfold increase in the number of points in the frame. Consequently, just one minute of uncompressed 8K video takes over 100GB.
Today, professional work with high-resolution video content is no longer the prerogative of just large studios. The growing popularity of series, streaming, and high-definition television is attracting more and more players into this business. All these studios continuously generate a massive amount of 'raw' material that requires subsequent processing.
It has become the norm that most workers in the content production industry are creative individuals. Among them, the primary approach to solving technical issues regarding disk capacity has been to acquire new external storage devices. Typically, these have been desktop NAS models with 2-5 drives. The choice is conditioned by simple and straightforward procedures for their use among non-technical specialists. The speed of operation is quite acceptable when used individually as DAS (especially when equipped with Thunderbolt or USB 3.0 interfaces). When joint data access is necessary, such a NAS (also known as DAS) can simply be connected to another workstation.
A folyamatosan növekvő alapanyag-mennyiség és a feldolgozásban résztvevő dolgozók számának emelkedése mellett ez a megközelítés (nevezzük „hagyományosnak”) egyre inkább beszűkül. Nemcsak, hogy a „dobozok” száma drámaian megnő (és ezzel együtt a beszerzési költségek is), hanem az adatokhoz való hozzáférés kényelme is érezhetően csökken. Különösen amikor együttműködésről van szó, a problémák szinte özönlenek: adat-hozzáférési konfliktusok, lassú sebesség stb. Ezért a „hagyományos” megközelítést egyre inkább modernebb megoldások váltják fel, amelyek központi tárolóra (vagy több tárolóra) és a tartalom közös hozzáférésének megszervezésére építenek.
Természetesen, csupán a beszerzés az új tartalomkezelési koncepcióra való áttérés nem ér véget. Szükséges megszervezni az adatok közös hozzáférését és biztosítani a nagy sebességű adatcserét a tároló és a tartalomfeldolgozó csomópontok között. Számos példa létezik a tartalomfeldolgozó infrastruktúrák kiépítésére. A főbb lehetőségek a következők:
A legegyszerűbb eset kisebb stúdiók számára. Az adatokhoz való hozzáféréshez fájlprotokollokat használnak, amelyek működését .
Közepes méretű stúdiók, ahol párhuzamosan több projekten is dolgoznakEzekben az esetekben ésszerű döntés a hozzájárulási access szervezése szerverek poolján keresztül. Ilyen körülmények között megvalósítható a tartalom folyamatos elérhetősége 24/7 módon, a kulcsfontosságú komponensek duplikálása révén: szerverek, kommunikációs csatornák, switchek és vezérlők. A folyamatos adat-hozzáférés rendkívül fontos a videóanyagok hosszantartó feldolgozása során, hiszen senki sem szeretne jelentős időt veszíteni, például a renderelési folyamat során felmerülő hibák miatt. Emellett a szerverek poolja lehetővé teszi a terhelés elosztását a munkaállomások között, a teljesítmény növelése érdekében.
Nagy stúdiók, beleértve a széleskörű sugárzásra összpontosítókat. Az ilyen projektekben a redundancia biztosítása már elengedhetetlen. Továbbá, a gyorsítás érdekében minden számottevő erőforrást igénylő folyamatot, mint például a renderelés és a posztprodukció, különbszolgáltatókra hárítanak, amelyek maximálisan gyors hozzáféréssel rendelkeznek az adattároló rendszerhez (SANS) a tartalomhoz. Ráadásul gyakran alkalmaznak több szintű adattárolást. Tehát lassú, de nagy kapacitású HDD-ket használnak a nyersanyagok és az archívum tárolására, valamint gyors SSD-ket az üzemeltetéshez és/vagy gyorsítótárazáshoz. Az egységes SANS keretein belül ezért több adathordozó típusból álló csoportokat hoznak létre, és automatizált eszközöket használnak, mint pl. és . Valóban nagy léptékű projektek esetén a több szintű tárolás több SANS használatával valósul meg, mindegyik sajátos .
. Egy médiaszolgáltató stúdió munkafolyamatának bemutatására példa a Tajvani televíziós állomás tartalomfeldolgozásának megszervezése. Itt egy megfelelően megtervezett rendszer kialakítása kerül bemutatásra, amelyet a 2. pontban írtunk le.
Minden médiafájl egy SANS-on van tárolva és a JBOD bővítő polcon . A szekrényben és a polcon összesen 24 darab 14TB-os NL-SAS lemez található. A tároló konfigurációja:
- SANS - 24x RAID60 csoport
- Bővítő polc – 22x RAID60 csoport. 2 db hot spare
A szerverek csoportja a hozzáférés biztosításához – egy 4 szerverből álló klaszter Windows Server környezetben. A tartalomhoz való hozzáférés CIFS protokollon keresztül történik. Fizikailag mind a négy szerver közvetlenül csatlakozik a SANS-hoz 16G Fibre Channel kapcsolaton keresztül, kapcsolók nélkül, . Az ügyfelek hozzáférése a szervercsoporthoz 10GbE hálózaton keresztül történik. Az ügyfelek Windows környezetben Edius v9 szoftvert használnak. A terhelések típusa:
- 4K videók kezelése 7 csatornán – 2 ügyfél
- 2K videók kezelése 13 csatornán – 10 ügyfél
Ennek eredményeként a megadott terhelésekkel a rendszer stabil 1500 MB/s összteljesítményt biztosít, amely kényelmes a televíziós állomás jelenlegi munkájához. Amennyiben szükség van a tárolókapacitás növelésére, az ügyfélnek csak annyit kell tennie, hogy új polcokat és további lemezeket ad hozzá a meglévő tömb bővítése céljából. Természetesen minden művelet online, a munkafolyamatok megszakítása nélkül elvégezhető.
A média mindig is fontos szerepet játszott a társadalom életében. Ma ez még inkább nyilvánvaló a streaming és a szórakoztatóipar fejlődése kapcsán. A "nehéz" tartalom komoly megközelítést igényel a feldolgozási megoldások kialakításában. Egy ilyen megoldás egyik fontos eleme a tárolórendszer. Az adatkezelő rendszer ideális szerepet játszik ebben, megbízható és nagy sebességű hozzáférést, valamint a teljesítmény bővítésének és növelésének könnyedségét biztosítva.
Forrás: habr.com
