El mundo moderno ya es difícil de imaginar sin la abundancia de contenido multimedia, que se presenta, entre otras formas, a través de datos de audio y video. Parece que no hace mucho, el límite de los sueños era tener una colección de archivos MP3. Hoy en día, los archivos de video con resolución 4K ya se perciben como algo cotidiano. Todo este contenido multimedia necesita ser creado, almacenado en algún lugar y luego proporcionado para su acceso. Los sistemas modernos de almacenamiento de datos (y entre otros) son herramientas ideales para trabajar con contenido.
Por supuesto, los principales consumidores de capacidad y ancho de banda en los canales de comunicación son los datos de video. El crecimiento constante de la resolución de los fotogramas incrementa las exigencias del hardware. Como resultado, el equipo que ayer era relevante se vuelve obsoleto rápidamente. De hecho, el típico avance a la siguiente generación de resolución implica un aumento de cuatro veces en el número de píxeles por fotograma. Como resultado, tan solo un minuto de video en 8K sin comprimir ocupa más de 100 GB.
Hoy en día, trabajar profesionalmente con contenido de video de alta resolución ya no es un privilegio exclusivo de grandes estudios. La creciente popularidad de las series, el streaming y la televisión de alta definición atrae a un número cada vez mayor de jugadores en este negocio. Todos estos estudios generan constantemente enormes cantidades de "material en bruto" que requieren procesamiento posterior.
Es costumbre que la mayoría de los trabajadores de la industria de producción de contenido sean personas creativas. Entre ellos, el enfoque principal para resolver cuestiones técnicas relacionadas con el almacenamiento de discos ha sido la adquisición de nuevos dispositivos de almacenamiento externos. Por lo general, estos son modelos de NAS de escritorio con 2 a 5 discos. La elección se debe a procedimientos simples y comprensibles para su uso entre personal no técnico. La velocidad de funcionamiento es bastante adecuada para el uso individual como DAS (especialmente si hay interfaces como Thunderbolt o USB 3.0). Si es necesario compartir datos, dicho NAS (que también es DAS) se conecta fácilmente a otra estación de trabajo.
Con un aumento en el volumen del material original y en la cantidad de trabajadores involucrados en su procesamiento, este enfoque (llamémoslo "tradicional") muestra claramente su ineficacia. No solo el número de "cajas" aumenta drásticamente (y por ende los gastos para adquirirlas), sino que también disminuye notablemente la facilidad de acceso a los datos. Cuando se trabaja en conjunto, los problemas surgen como de un cuerno de la abundancia: conflictos de acceso a los datos, velocidad insuficiente, etc. Por lo tanto, el enfoque "tradicional" es cada vez más reemplazado por soluciones más modernas basadas en un almacenamiento centralizado (o varios almacenes) y la organización de acceso compartido al contenido.
Por supuesto, simplemente adquirir la transición a un nuevo concepto de trabajo con contenido no se detiene. También será necesario organizar el acceso compartido a los datos y asegurar un intercambio de alta velocidad entre el almacenamiento y los nodos de procesamiento de contenido. Puede haber varios ejemplos de la infraestructura para el procesamiento de contenido. Los principales son los siguientes:
El caso más simple para estudios pequeños. Para organizar el acceso a los datos, se utilizan protocolos de archivos, cuya operación es asegurada por .
Estudios de tamaño mediano, en los que se trabaja paralelamente en varios proyectos. Aquí, una elección sensata sería organizar el acceso a los datos a través de un grupo de servidores. En este caso, se tiene la posibilidad de implementar un acceso redundante al contenido en modo 24/7 mediante la duplicación de todos los componentes clave: servidores, canales de comunicación, conmutadores y controladores de almacenamiento. El acceso constante a los datos es extremadamente importante durante el procesamiento prolongado de material de video, ya que a nadie le gusta perder una gran cantidad de tiempo, por ejemplo, debido a una falla en el proceso de renderización. Además, al tener un grupo de servidores, se puede garantizar la carga equilibrada para las estaciones de trabajo con el fin de aumentar el rendimiento general.
Grandes estudios, incluidos aquellos orientados a la transmisión masiva. En tales proyectos, la tolerancia a fallos mediante la duplicación de componentes ya es un requisito indispensable. Además, para acelerar, todos los procesos principales que consumen recursos en la renderización y el post-procesamiento se trasladan de las estaciones de trabajo a servidores especiales, que tienen el acceso más rápido posible a los sistemas de almacenamiento de datos con contenido. Más aún, a menudo se aplica el almacenamiento de datos en múltiples niveles. Es decir, se utilizan discos duros HDD lentos, pero de gran capacidad para el almacenamiento de materiales originales y archivos, así como discos SSD rápidos para el trabajo operativo y/o almacenamiento en caché. En el marco de un único sistema de almacenamiento, se crean varios grupos de diferentes tipos de medios, y también se utilizan herramientas automatizadas como y . En proyectos realmente grandes, el almacenamiento multinivel se logra mediante el uso de varios sistemas de almacenamiento, cada uno de los cuales almacena .
. Como ejemplo de implementación del trabajo de un estudio de medios, queremos presentar la organización del proceso de procesamiento de contenido en una de las estaciones de radiodifusión de Taiwán. Aquí se aplica un esquema razonablemente suficiente para construir el sistema, descrito en el punto 2.
Todo el contenido multimedia se almacena en el sistema de almacenamiento y en la unidad de expansión JBOD . En el chasis y la unidad se instalan 24 discos NL-SAS de 14 TB cada uno. La configuración del espacio de disco es:
- Sistema de almacenamiento — grupo 24x RAID60
- Unidad de expansión – grupo 22x RAID60. 2 x hot spare
Grupo de servidores para garantizar el acceso a los datos – un clúster de 4 servidores con Windows Server. El acceso al contenido se organiza a través del protocolo CIFS. Físicamente, todos los 4 servidores están conectados al sistema de almacenamiento a través de Fibre Channel 16G sin el uso de conmutadores, . El acceso de los clientes al grupo de servidores se realiza a través de una red 10GbE. En los clientes se utiliza el software Edius v9 en un entorno Windows. Tipos de cargas:
- Trabajo con video 4K en 7 flujos – 2 clientes
- Trabajo con video 2K en 13 flujos – 10 clientes
Como resultado, bajo las cargas mencionadas, el sistema proporciona un rendimiento total estable de 1500 MB/s, que es cómodo para el trabajo actual de la estación de televisión. En caso de que sea necesario aumentar el espacio en disco, al cliente solo le basta con agregar unidades de expansión adicionales y ampliar el conjunto existente con nuevos discos. Por supuesto, todas estas operaciones se pueden realizar en modo online, sin interrumpir los procesos de trabajo.
Los medios siempre han jugado un papel importante en la vida de la sociedad. Hoy en día, esto es más evidente que nunca debido al desarrollo del streaming y la industria del entretenimiento. El contenido “pesado” requiere un enfoque serio para la construcción de soluciones para su procesamiento. Y uno de los elementos importantes en esa solución es el subsistema de almacenamiento. El sistema de almacenamiento de datos se adapta perfectamente a este papel, proporcionando acceso fiable y de alta velocidad, así como facilidad de expansión y aumento del rendimiento.
Fuente: habr.com
