Utilizzo di sistemi di archiviazione nel lavoro con contenuti multimediali

È difficile immaginare il mondo moderno senza l’abbondanza di contenuti multimediali, presentati, tra le altre cose, sotto forma di dati audio e video. Sembrerebbe che proprio di recente il sogno più grande fosse una raccolta di file MP3. E oggi i file video con risoluzione 4K sono già percepiti come qualcosa di ordinario. Tutti questi contenuti multimediali devono essere creati, pubblicati da qualche parte e poi resi disponibili a tutti. I moderni sistemi di archiviazione dei dati (e Qsan incluso) sono perfettamente adatti come uno degli strumenti principali per lavorare con i contenuti.

Utilizzo di sistemi di archiviazione nel lavoro con contenuti multimediali

Naturalmente, i principali consumatori di capacità e larghezza di banda dei canali di comunicazione sono i dati video. Il costante aumento della risoluzione dei fotogrammi video aumenta i requisiti per l'hardware. Di conseguenza, le apparecchiature che ieri erano ancora attuali stanno rapidamente diventando obsolete. Dopotutto, una tipica transizione alla prossima generazione di risoluzione comporta un aumento di quattro volte del numero di punti nell'inquadratura. Di conseguenza, un solo minuto di video 8K non compresso occupa oltre 100 GB.

Oggi il lavoro professionale con contenuti video ad alta definizione non è più prerogativa dei soli grandi studi. La crescente popolarità delle serie TV, dello streaming e della televisione ad alta definizione attira sempre più operatori verso questo business. Tutti questi studi generano costantemente un’enorme quantità di materiale “grezzo” che necessita di ulteriore elaborazione.

Utilizzo di sistemi di archiviazione nel lavoro con contenuti multimediali

Si dà il caso che la maggior parte dei lavoratori del settore della produzione di contenuti siano persone creative. E tra questi, l'approccio principale alla risoluzione dei problemi tecnici relativi all'utilizzo della capacità del disco era l'acquisto di nuove unità esterne. Di norma, il loro ruolo era svolto dai modelli NAS desktop con 2-5 dischi. Scelta NAS grazie a procedure semplici e comprensibili per il loro funzionamento tra specialisti non tecnici. La velocità operativa è abbastanza accettabile se utilizzato singolarmente come DAS (soprattutto se sono presenti interfacce come Thunderbolt o USB 3.0). Se è necessario condividere dati, un NAS di questo tipo (noto anche come DAS) viene semplicemente collegato a un'altra workstation.

Con un volume crescente di materiale di partenza e un aumento del numero di lavoratori coinvolti nella sua elaborazione, questo approccio (chiamiamolo “tradizionale”) mostra chiaramente la sua incoerenza. Non solo il numero di “scatole” è in forte aumento (e allo stesso tempo i costi per il loro acquisto), ma anche la comodità di accesso ai dati sta drasticamente diminuendo. E quando si lavora insieme, i problemi emergono come una cornucopia: conflitti di accesso ai dati, velocità insufficiente, ecc. Pertanto, l’approccio “tradizionale” viene sempre più sostituito da soluzioni più moderne basate su un archivio centralizzato (o più archivi) e sull’organizzazione dell’accesso condiviso. al contenuto.

Naturalmente, semplicemente acquistando Magazzinaggio La transizione verso un nuovo concetto di lavoro con i contenuti non finisce qui. Sarà inoltre necessario organizzare l’accesso condiviso ai dati e garantire uno scambio ad alta velocità tra i nodi di archiviazione e di elaborazione dei contenuti. Potrebbero esserci diversi esempi di costruzione di un'infrastruttura di elaborazione dei contenuti. I principali sono i seguenti:

  1. Il caso più semplice per i piccoli studi. Per organizzare l'accesso ai dati vengono utilizzati protocolli di file, il cui funzionamento è garantito funzionalità del sistema di storage stesso.

    Utilizzo di sistemi di archiviazione nel lavoro con contenuti multimediali

  2. Studi di medie dimensioni in cui si lavorano più progetti contemporaneamente. In questo caso una scelta ragionevole sarebbe quella di organizzare l’accesso ai dati attraverso un pool di server. In questo caso è possibile implementare un accesso ai contenuti con tolleranza agli errori 24 ore su 7, XNUMX giorni su XNUMX, duplicando tutti i componenti chiave: server, canali di comunicazione, switch e controller di storage. L'accesso costante ai dati è estremamente importante quando si elabora materiale video per un lungo periodo, perché nessuno vuole perdere molto tempo, ad esempio, a causa di un errore nel processo di rendering. Inoltre, se si dispone di un pool di server, è possibile prevedere il bilanciamento del carico per le workstation al fine di migliorare le prestazioni complessive.

    Utilizzo di sistemi di archiviazione nel lavoro con contenuti multimediali

  3. Grandi studi, compresi quelli destinati ad un'ampia trasmissione. In tali progetti, la tolleranza agli errori dovuta alla duplicazione dei componenti è già un must. Inoltre, per accelerare, tutti i principali processi di rendering e post-elaborazione ad alta intensità di risorse sono stati spostati dalle workstation a server speciali che hanno l'accesso più veloce possibile ai sistemi di archiviazione con i contenuti. Inoltre, viene spesso utilizzata l'archiviazione dei dati multilivello. Quelli. gli HDD lenti ma capienti vengono utilizzati per archiviare materiali sorgenti e archivi, nonché SSD veloci per il lavoro operativo e/o il caching. Nell'ambito di un unico sistema di archiviazione, a questo scopo vengono creati diversi pool da diversi tipi di media e strumenti automatizzati come Tiering automatico и Cache SSD. In progetti davvero su larga scala, lo stoccaggio multilivello si ottiene utilizzando diversi sistemi di stoccaggio, ciascuno dei quali memorizza tipo di dati specifico.

    Utilizzo di sistemi di archiviazione nel lavoro con contenuti multimediali

Come esempio dell'implementazione del lavoro di uno studio multimediale, vorremmo citare l'organizzazione del processo di elaborazione dei contenuti presso una delle emittenti televisive di Taiwan. In questo caso viene applicato uno schema ragionevolmente sufficiente per la costruzione del sistema, descritto nel paragrafo 2.

Tutti i contenuti multimediali vengono archiviati nel sistema di archiviazione Qsan XS5224-D e scaffale di espansione JBOD XD5324-D. Lo chassis e lo scaffale sono dotati di 24 unità NL-SAS con una capacità di 14 TB ciascuna. Configurazione dello spazio su disco:

  • Archiviazione: pool 24x RAID60
  • Ripiano di espansione: pool RAID22 60x. 2 hot spare

Il pool di server per fornire l'accesso ai dati è un cluster di 4 server basato su Windows Server. L'accesso ai contenuti è organizzato tramite il protocollo CIFS. Fisicamente tutti e 4 i server hanno una connessione al sistema di storage tramite Fibre Channel 16G senza l'utilizzo di switch, fortunatamente il sistema di storage dispone di porte sufficienti per questo scopo. I client accedono al pool di server tramite una rete 10GbE. I client utilizzano il software Edius v9 in un ambiente Windows. Tipi di carico:

  • Lavora con video 4K su 7 flussi – 2 client
  • Lavora con video 2K per 13 stream – 10 client

Di conseguenza, con i carichi specificati, il sistema fornisce una prestazione totale stabile di 1500 MB/s, che è comoda per l'attuale funzionamento della stazione televisiva. Se è necessario aumentare lo spazio su disco, il cliente dovrà semplicemente aggiungere ulteriori scaffali ed espandere l'array esistente con nuovi dischi. Naturalmente tutte queste operazioni possono essere eseguite online senza interrompere i processi lavorativi.

I media hanno sempre avuto un ruolo importante nella vita della società. Oggi, questo è più evidente che mai grazie allo sviluppo dello streaming e dell’industria dell’intrattenimento. I contenuti “pesanti” richiedono un approccio serio quando si creano soluzioni per elaborarli. E uno degli elementi importanti in tale soluzione è il sottosistema del disco. Lo storage si adatta perfettamente a questo ruolo, fornendo un accesso affidabile e ad alta velocità e facilità di espansione e prestazioni.

Fonte: habr.com

Aggiungi un commento