Използване на системи за съхранение при работа с медийно съдържание

Трудно е да си представим съвременния свят без изобилие от медийно съдържание, представено, наред с други неща, под формата на аудио и видео данни. Изглежда, че съвсем наскоро крайната мечта беше колекция от MP3 файлове. И днес видео файловете с 4K резолюция вече се възприемат като нещо обикновено. Цялото това медийно съдържание трябва да бъде създадено, публикувано някъде и след това достъпно за всички. Съвременните системи за съхранение на данни (и Ксан включително) са идеално подходящи като един от основните инструменти за работа със съдържание.

Използване на системи за съхранение при работа с медийно съдържание

Разбира се, основните потребители на капацитет и честотна лента на комуникационните канали са видео данни. Постоянното нарастване на разделителната способност на видео кадрите повишава изискванията към хардуера. В резултат на това оборудването, което беше все още актуално вчера, бързо остарява. В края на краищата типичният преход към следващото поколение разделителна способност води до четирикратно увеличение на броя на точките в рамката. В резултат на това само една минута некомпресирано 8K видео заема над 100 GB.

Днес професионалната работа с видеосъдържание с висока разделителна способност вече не е прерогатив само на големи студия. Нарастващата популярност на телевизионните сериали, стрийминг и телевизията с висока разделителна способност привлича все повече играчи към този бизнес. Всички тези студиа непрекъснато генерират огромно количество „суров“ материал, който изисква допълнителна обработка.

Използване на системи за съхранение при работа с медийно съдържание

Така се случва, че по-голямата част от работниците в производството на съдържание са креативни хора. И сред тях основният подход за решаване на технически проблеми, свързани с работата с дисков капацитет, беше закупуването на нови външни устройства. Като правило тяхната роля се играе от настолни NAS модели с 2-5 диска. Избор NAS поради простите и разбираеми процедури за тяхната работа сред нетехническите специалисти. Скоростта на работа е доста приемлива, когато се използва самостоятелно като DAS (особено ако има интерфейси като Thunderbolt или USB 3.0). Ако трябва да споделяте данни, такъв NAS (известен още като DAS) просто се свързва с друга работна станция.

С нарастващия обем на изходния материал и увеличаването на броя на работниците, участващи в неговата обработка, този подход (да го наречем „традиционен“) ясно показва своята непоследователност. Не само броят на „кутиите“ рязко нараства (и в същото време разходите за закупуването им), но и удобството за достъп до данни рязко намалява. И когато работим заедно, проблемите изникват като рог на изобилието: конфликти при достъп до данни, недостатъчна скорост и т.н. Следователно „традиционният“ подход все повече се заменя с по-модерни решения, базирани на централизирано хранилище (или няколко хранилища) и организиране на споделен достъп към съдържанието.

Разбира се, само чрез закупуване SHD Преходът към нова концепция за работа със съдържание не свършва дотук. Също така ще е необходимо да се организира споделен достъп до данни и да се осигури високоскоростен обмен между възлите за съхранение и обработка на съдържание. Може да има няколко примера за изграждане на инфраструктура за обработка на съдържание. Основните са следните:

  1. Най-простият случай за малки студия. За организиране на достъпа до данни се използват файлови протоколи, чиято работа е осигурена функционалност на самата система за съхранение.

    Използване на системи за съхранение при работа с медийно съдържание

  2. Средно големи студия, в които се работи по няколко проекта едновременно. Тук разумен избор би бил организирането на достъп до данни чрез пул от сървъри. В този случай е възможно да се реализира устойчив на грешки достъп до съдържание 24/7 чрез дублиране на всички ключови компоненти: сървъри, комуникационни канали, комутатори и контролери за съхранение. Постоянният достъп до данни е изключително важен при обработката на видео материал за дълго време, защото никой не иска да губи огромно количество време, например поради повреда в процеса на изобразяване. Освен това, ако имате набор от сървъри, е възможно да осигурите балансиране на натоварването за работните станции, за да подобрите цялостната производителност.

    Използване на системи за съхранение при работа с медийно съдържание

  3. Големи студия, включително тези, насочени към широко излъчване. В такива проекти толерантността към грешки поради дублиране на компоненти вече е задължителна. Освен това, за да се ускори, всички основни процеси с интензивно използване на ресурси на изобразяване и последваща обработка са преместени от работни станции към специални сървъри, които имат възможно най-бърз достъп до системи за съхранение със съдържание. Освен това често се използва многостепенно съхранение на данни. Тези. бавни, но вместими HDD се използват за съхранение на изходни материали и архиви, както и бързи SSD за оперативна работа и/или кеширане. В рамките на една система за съхранение за тази цел се създават няколко пула от различни видове носители и автоматизирани инструменти като напр. AutoTiering и SSD кеш. В наистина мащабни проекти многостепенното съхранение се постига чрез използването на няколко системи за съхранение, всяка от които съхранява специфичен тип данни.

    Използване на системи за съхранение при работа с медийно съдържание

Като пример за изпълнение на работата на медийно студио бихме искали да цитираме организацията на процеса на обработка на съдържанието в една от телевизионните станции в Тайван. Тук се прилага разумно достатъчна схема за изграждане на системата, описана в параграф 2.

Цялото медийно съдържание се съхранява в системата за съхранение Qsan XS5224-D и JBOD разширителен рафт XD5324-D. Шасито и рафтът са оборудвани с 24 NL-SAS диска с капацитет 14 TB всеки. Конфигурация на дисково пространство:

  • Съхранение - пул 24x RAID60
  • Разширителен рафт – пул 22x RAID60. 2 x горещ резерв

Сървърният пул за предоставяне на достъп до данни е клъстер от 4 сървъра, базирани на Windows Server. Достъпът до съдържанието е организиран чрез протокола CIFS. Физически всичките 4 сървъра имат връзка със системата за съхранение чрез Fibre Channel 16G без използването на комутатори, за щастие системата за съхранение има достатъчно портове за това. Клиентите имат достъп до сървърния пул чрез 10GbE мрежа. Клиентите използват софтуер Edius v9 в Windows среда. Видове товари:

  • Работа с 4K видео на 7 потока – 2 клиента
  • Работа с 2K видео за 13 потока – 10 клиента

В резултат на това при посочените натоварвания системата осигурява стабилна обща производителност от 1500 MB/s, което е комфортно за текущата работа на телевизионната станция. Ако е необходимо да се увеличи дисковото пространство, клиентът просто трябва да добави допълнителни рафтове и да разшири съществуващия масив с нови дискове. Разбира се, всички тези операции могат да се извършват онлайн, без да се прекъсват работните процеси.

Медиите винаги са играли важна роля в живота на обществото. Днес това е по-забележимо от всякога поради развитието на стрийминга и развлекателната индустрия. „Тежкото“ съдържание изисква сериозен подход при създаването на решения за неговата обработка. И един от важните елементи в подобно решение е дисковата подсистема. Съхранението пасва идеално на тази роля, осигурявайки надежден, високоскоростен достъп и лесно разширяване и производителност.

Източник: www.habr.com

Добавяне на нов коментар