Съвременният свят вече е трудно да си представим без изобилие от медийно съдържание, представено и под формата на аудио и видео данни. Още преди малко време пределът на мечтите беше колекция от MP3 файлове. А днес видеофайловете с разделителна способност 4K вече се възприемат като нещо обичайно. Всичкото това медийно съдържание трябва да се създаде, някъде да се разположи и след това да се предостави достъп до него. Съвременните системи за съхранение на данни (и включително) са идеални инструменти за работа с съдържание.
Разбира се, основните потребители на капацитета и пропускната способност на комуникационните канали са видеоданните. Постоянният растеж на разделителната способност на видеокадъра увеличава изискванията към оборудването. В резултат на това оборудването, което все още е актуално вчера, бързо остарява. Възможен е типичен преход към следващо поколение разделителна способност, който води до увеличение на броя на точките в кадърчетата четири пъти. В крайна сметка, само една минута видеоклип с разделителна способност 8K в несжат формат заема повече от 100ГБ.
Днес професионалната работа с видеосъдържание с висока разделителна способност вече не е прерогатива само на големите студия. Увеличаващата се популярност на сериалите, стрийминг и телевизия с висока разделителна способност привлича все повече играчи в този бизнес. Всички тези студия постоянно генерират огромно количество "суров" материал, който изисква по-късна обработка.
Наложи се, че основната част от работниците в индустрията по производството на съдържание са творчески личности. И сред тях основният подход за решаване на технически въпроси, свързани с дисковия капацитет, беше закупуването на нови външни устройства за съхранение. Обикновено това бяха настолни модели NAS с 2-5 дискове. Изборът е обусловен от простите и ясни процедури за експлоатация сред нетехническите специалисти. Скоростта на работа е напълно приемлива при индивидуална употреба в качеството на DAS (особено при наличие на интерфейси като Thunderbolt или USB 3.0). При необходимост от съвместен достъп до данни, такъв NAS (който също е DAS) просто се свързва с друга работна станция.
С увеличением объема исходного материала и роста числа сотрудников, задействованных в его обработке, традиционный подход становится неэффективным. Число "коробок" резко возрастает, что увеличивает затраты на их приобретение, и одновременно падает удобство доступа к данным. При совместной работе возникают проблемы, такие как конфликты доступа к данным и недостаточная скорость. Поэтому традиционные методы все чаще заменяются современными решениями на основе централизованного хранилища (или нескольких хранилищ) и организации совместного доступа к контенту.
Безусловно, просто покупка не решает всех вопросов при переходе на новую концепцию работы с контентом. Необходимо организовать совместный доступ к данным и обеспечить высокоскоростной обмен между хранилищем и узлами обработки контента. Есть несколько основных примеров построения инфраструктуры для обработки контента:
Простейший случай для небольших студий.Доступ к данным организуется с использованием файловых протоколов, которые поддерживаются .
Для студий среднего размера, где одновременно выполняются несколько проектов,расумным решением будет организовать доступ к данным через пул серверов. Это даст возможность обеспечить отказоустойчивый доступ к контенту в режиме 24/7 за счет дублирования ключевых компонентов: серверов, каналов связи, коммутаторов и контроллеров СХД. Постоянный доступ к данным крайне важен при длительной обработке видео, ведь потеря времени из-за сбоя в процессе рендеринга никому не нужна. Кроме того, наличие пула серверов позволяет осуществлять балансировку нагрузки для рабочих станций, что способствует повышению общей производительности.
Крупные студии, включая те, что нацелены на широкое вещание.. В такива проекти отказоустойчивостта чрез дублиране на компоненти е вече необходимост. За ускоряване всички основни ресурсно интензивни процеси по рендериране и постобработка са преместени от работните станции на специализирани сървъри, които имат максимално бърз достъп до СХД с съдържание. Освен това, често се прилага многопластово съхранение на данни. Т.е. използват се бавни, но обемисти HDD за съхранение на изходни материали и архиви, а също и бързи SSD за оперативна работа и/или кеширане. В рамките на единна СХД за това се създават няколко пула от различни типове носители, а също се използват автоматизирани средства от типа и . В реално мащабни проекти многопластовото съхранение се постига чрез използване на няколко СХД, всяка от които съхранява .
Като пример за реализирана работа на медия студия, бихме искали да представим организацията на процеса на обработка на съдържание в една от телевизионните станции в Тайван. Тук се прилага разумно достатъчна схема на изграждане на системата, описана в точка 2.
Всички медийни съдържания се съхраняват на СХД и разширителен шкаф JBOD . В шасито и шкафа са инсталирани по 24 диска NL-SAS с капацитет 14TB всеки. Конфигурация на дисковото пространство:
- СХД — пул 24х RAID60
- Разширителен шкаф – пул 22х RAID60. 2 х hot spare
Пул сървъри за осигуряване на достъп до данни – клъстер от 4 сървъра на базата на Windows Server. Достъпът до съдържанието се организира чрез протокол CIFS. Физически всички 4 сървъра имат свързаност към СХД чрез Fibre Channel 16G без използване на комутатори, . Достъпът на клиентите до пула от сървъри се осъществява чрез мрежа 10GbE. На клиентските машини се използва софтуер Edius v9 в среда Windows. Видове натоварвания:
- Работа с 4K видео на 7 потока – 2 клиента
- Работа с 2K видео на 13 потока – 10 клиента
В крайна сметка, при посочените натоварвания, системата осигурява стабилна обща производителност от 1500 MB/s, която е комфортна за текущата работа на телевизионната станция. В случай на необходимост от увеличаване на дисковото пространство, на клиента му е достатъчно да добави допълнителни шкафове и да разшири съществуващия масив с нови дискове. Разбира се, всички тези операции могат да се извършат в режим на работа, без да се прекъсват работните процеси.
Медиите винаги са играли важна роля в живота на обществото. Днес това е по-забележимо от всякога заради развитието на стрийминг и индустрията на развлеченията. „Тежкото“ съдържание изисква сериозен подход при изграждането на решения за неговата обработка. Един от ключовите елементи в такова решение е дисковата подсистема. Системата за съхранение на данни идеално отговаря на тази роля, осигурявайки надежден и високоскоростен достъп, както и лесно разширяване и увеличаване на производителността.
Източник: habr.com
