Uso de sistemas de almacenamiento al trabajar con contenido multimedia.

Es difícil imaginar el mundo moderno sin una gran cantidad de contenidos multimedia, presentados, entre otras cosas, en forma de datos de audio y vídeo. Parecería que recientemente el mayor sueño era una colección de archivos MP3. Y hoy en día, los archivos de vídeo con resolución 4K ya se perciben como algo normal. Todo este contenido multimedia debe crearse, publicarse en algún lugar y luego ponerse a disposición de todos. Los sistemas modernos de almacenamiento de datos (y qsan incluidos) se adaptan perfectamente como una de las principales herramientas para trabajar con contenidos.

Uso de sistemas de almacenamiento al trabajar con contenido multimedia.

Por supuesto, los principales consumidores de capacidad y ancho de banda de los canales de comunicación son los datos de vídeo. El aumento constante de la resolución de los fotogramas de vídeo aumenta los requisitos de hardware. Como resultado, los equipos que ayer todavía eran relevantes se están volviendo obsoletos rápidamente. Después de todo, una transición típica a la siguiente generación de resolución implica cuadriplicar el número de puntos en el cuadro. Como resultado, sólo un minuto de vídeo 8K sin comprimir ocupa más de 100 GB.

Hoy en día, el trabajo profesional con contenidos de vídeo de alta definición ya no es prerrogativa exclusiva de los grandes estudios. La creciente popularidad de las series de televisión, el streaming y la televisión de alta definición está atrayendo cada vez a más actores a este negocio. Todos estos estudios generan constantemente una enorme cantidad de material "en bruto" que requiere un procesamiento posterior.

Uso de sistemas de almacenamiento al trabajar con contenido multimedia.

Da la casualidad de que la mayoría de los trabajadores de la industria de producción de contenidos son personas creativas. Y entre ellos, el enfoque principal para resolver problemas técnicos relacionados con el trabajo con la capacidad del disco fue comprar nuevas unidades externas. Como regla general, su papel lo desempeñaban los modelos NAS de escritorio con 2-5 discos. Elección NAS debido a procedimientos simples y comprensibles para su operación entre especialistas no técnicos. La velocidad de funcionamiento es bastante aceptable cuando se utiliza individualmente como DAS (especialmente si hay interfaces como Thunderbolt o USB 3.0). Si necesita compartir datos, un NAS (también conocido como DAS) simplemente se conecta a otra estación de trabajo.

Con un volumen cada vez mayor de material de origen y un aumento en el número de trabajadores involucrados en su procesamiento, este enfoque (llamémoslo “tradicional”) está mostrando claramente su inconsistencia. No sólo está aumentando considerablemente el número de “cajas” (y al mismo tiempo los costos de adquirirlas), sino que la conveniencia de acceder a los datos también está disminuyendo considerablemente. Y cuando se trabaja en conjunto, los problemas surgen como una cornucopia: conflictos de acceso a los datos, velocidad insuficiente, etc. Por lo tanto, el enfoque "tradicional" está siendo reemplazado cada vez más por soluciones más modernas basadas en un almacenamiento centralizado (o varios almacenamientos) y en la organización del acceso compartido. satisfacer.

Por supuesto, con sólo comprar Almacenamiento La transición hacia un nuevo concepto de trabajo con contenidos no termina ahí. También será necesario organizar el acceso compartido a los datos y garantizar un intercambio de alta velocidad entre los nodos de almacenamiento y procesamiento de contenidos. Puede haber varios ejemplos de construcción de una infraestructura de procesamiento de contenidos. Los principales son los siguientes:

  1. El caso más sencillo para pequeños estudios.. Para organizar el acceso a los datos se utilizan protocolos de archivos, cuyo funcionamiento está garantizado. funcionalidad del propio sistema de almacenamiento.

    Uso de sistemas de almacenamiento al trabajar con contenido multimedia.

  2. Estudios de tamaño medio donde se trabajan varios proyectos simultáneamente. En este caso, una opción razonable sería organizar el acceso a los datos a través de un conjunto de servidores. En este caso, es posible implementar un acceso tolerante a fallos al contenido las 24 horas del día, los 7 días de la semana, duplicando todos los componentes clave: servidores, canales de comunicación, conmutadores y controladores de almacenamiento. El acceso constante a los datos es extremadamente importante cuando se procesa material de vídeo durante mucho tiempo, porque nadie quiere perder una gran cantidad de tiempo, por ejemplo, debido a un fallo en el proceso de renderizado. Además, si tiene un grupo de servidores, es posible proporcionar equilibrio de carga para las estaciones de trabajo para mejorar el rendimiento general.

    Uso de sistemas de almacenamiento al trabajar con contenido multimedia.

  3. Grandes estudios, incluidos los destinados a la radiodifusión amplia.. En este tipo de proyectos, la tolerancia a fallos debido a la duplicación de componentes ya es imprescindible. Además, para acelerar, todos los procesos principales de renderizado y posprocesamiento que consumen muchos recursos se han trasladado de estaciones de trabajo a servidores especiales que tienen el acceso más rápido posible a los sistemas de almacenamiento con contenido. Además, a menudo se utiliza el almacenamiento de datos de varios niveles. Aquellos. Los HDD lentos pero de gran capacidad se utilizan para almacenar archivos y materiales de origen, así como los SSD rápidos para el trabajo operativo y/o el almacenamiento en caché. En el marco de un único sistema de almacenamiento, se crean para ello varios pools a partir de diferentes tipos de soportes y herramientas automatizadas como Autonivelación и Caché SSD. En proyectos realmente a gran escala, el almacenamiento multinivel se logra mediante el uso de varios sistemas de almacenamiento, cada uno de los cuales almacena tipo de datos específico.

    Uso de sistemas de almacenamiento al trabajar con contenido multimedia.

Como ejemplo de la implementación del trabajo de un estudio de medios, nos gustaría citar la organización del proceso de procesamiento de contenidos en una de las estaciones de televisión de Taiwán. Aquí se aplica un esquema razonablemente suficiente para construir el sistema, descrito en el párrafo 2.

Todo el contenido multimedia se almacena en el sistema de almacenamiento. Qsan XS5224-D y estante de expansión JBOD XD5324-D. El chasis y el estante están equipados con 24 unidades NL-SAS con una capacidad de 14 TB cada una. Configuración del espacio en disco:

  • Sistema de almacenamiento - grupo 24x RAID60
  • Estante de expansión: grupo RAID22 de 60x. 2 x repuesto caliente

El grupo de servidores para proporcionar acceso a los datos es un grupo de 4 servidores basados ​​en Windows Server. El acceso al contenido se organiza a través del protocolo CIFS. Físicamente los 4 servidores tienen conexión al sistema de almacenamiento vía Fibre Channel 16G sin el uso de switchs. Afortunadamente, el sistema de almacenamiento tiene suficientes puertos para esto.. Los clientes acceden al grupo de servidores a través de una red de 10 GbE. Los clientes utilizan el software Edius v9 en un entorno Windows. Tipos de carga:

  • Trabaje con vídeo 4K en 7 transmisiones: 2 clientes
  • Trabaje con vídeo 2K para 13 transmisiones – 10 clientes

Como resultado, bajo las cargas especificadas, el sistema proporciona un rendimiento total estable de 1500 MB/s, lo cual es cómodo para el funcionamiento actual de la estación de televisión. Si es necesario aumentar el espacio en disco, el cliente sólo necesita agregar estantes adicionales y ampliar la matriz existente con discos nuevos. Por supuesto, todas estas operaciones se pueden realizar online sin interrumpir los procesos de trabajo.

Los medios de comunicación siempre han jugado un papel importante en la vida de la sociedad. Hoy en día, esto se nota más que nunca debido al desarrollo del streaming y de la industria del entretenimiento. El contenido “pesado” requiere un enfoque serio a la hora de crear soluciones para su procesamiento. Y uno de los elementos importantes de dicha solución es el subsistema de disco. El almacenamiento encaja perfectamente en esta función, ya que proporciona un acceso confiable y de alta velocidad y una fácil expansión y rendimiento.

Fuente: habr.com

Añadir un comentario