Сучасны свет ужо складана ўявіць без багацця медыя кантэнту, прадстаўленага, у тым ліку, у выглядзе аўдыё і відэа дадзеных. Здавалася б, яшчэ зусім нядаўна мяжой летуценняў была калекцыя MP3 файлаў. А сёння відэафайлы з дазволам 4K ужо ўспрымаюцца як нешта звычайнае. Увесь гэты медыя кантэнт трэба стварыць, дзесьці размясціць і затым падаць да яго доступ. Сучасныя сістэмы захоўвання дадзеных (і у тым ліку) як нельга лепш падыходзяць у якасці адной з асноўных прылад па працы з кантэнтам.
Зразумела, асноўнымі спажыўцамі ёмістасці і палосы прапускання каналаў сувязі з'яўляюцца відэададзеныя. Пастаянны рост дазволу відэакадра падвышае патрабаванні да «жалезу». У выніку чаго яшчэ актуальнае ўчора абсталяванне імкліва састарваецца. Бо тыповы пераход да наступнага пакалення адрознівальнай здольнасці цягне павелічэнне колькасці кропак у кадры ў чатыры разы. У выніку ўсяго толькі адна хвіліна відэа з дазволам 8K у несціснутым выглядзе займае больш за 100ГБ.
Сёння прафесійная праца з відэакантэнтам высокага дазволу ўжо не з'яўляецца прэрагатывай толькі буйных студый. Нарастальная папулярнасць серыялаў, стрымінгу і тэлебачання высокай выразнасці прыцягвае ў гэты бізнэс усё большую колькасць гульцоў. Усе гэтыя студыі ўвесь час генеруюць велізарную колькасць «волкага» матэрыялу, які патрабуе наступнай апрацоўкі.
Так ужо павялося, што асноўная маса працаўнікоў індустрыі па вытворчасці кантэнту - людзі творчыя. І сярод іх асноўны падыход для вырашэння тэхнічных пытанняў па рабоце з дыскавай ёмістасцю заключаўся ў набыцці новых знешніх назапашвальнікаў. Як правіла, у іх ролі выступалі настольныя мадэлі NAS на 2-5 дыскаў. Выбар абумоўлены простымі і зразумелымі працэдурамі па іх эксплуатацыі сярод нетэхнічных спецыялістаў. Хуткасць жа працы з'яўляецца суцэль прымальнай пры індывідуальным выкарыстанні ў якасці DAS (асабліва пры наяўнасці інтэрфейсаў тыпу Thunderbolt ці USB 3.0). Пры неабходнасці сумеснага доступу да дадзеных, такі NAS (ён жа DAS) проста падлучаецца да іншай працоўнай станцыі.
Пры нарастальным аб'ёме зыходнага матэрыялу і павелічэнні колькасці працаўнікоў, задзейнічаных у яго апрацоўцы, такі падыход (назавем яго "традыцыйным") на ўсю моц паказвае сваю безгрунтоўнасць. Мала таго, што колькасць "скрынак" рэзка ўзрастае (а разам з тым і выдаткі на іх набыццё), таксама рэзка падае зручнасць у доступе да дадзеных. А ўжо пры сумеснай працы праблемы лезуць, як з рога багацця: канфлікты доступу да дадзеных, недастатковая хуткасць і інш. Таму "традыцыйны" падыход усё гушчару змяняецца больш сучаснымі рашэннямі на базе цэнтралізаванага сховішча (або некалькіх сховішчаў) і арганізацыі сумеснага доступу да кантэнту.
Зразумела, проста набыццём пераход на новую канцэпцыю працы з кантэнтам не заканчваецца. Таксама спатрэбіцца арганізаваць сумесны доступ да даных і забяспечыць высакахуткасны абмен паміж сховішчам і вузламі апрацоўкі кантэнту. Прыкладаў пабудовы інфраструктуры па апрацоўцы кантэнту можа быць некалькі. Асноўныя з іх наступныя:
-
Найпросты выпадак для невялікіх студый. Для арганізацыі доступу да дадзеных выкарыстоўваюцца файлавыя пратаколы, праца якіх забяспечваецца .
-
Студыі сярэдніх памераў, на якіх паралельна ідзе праца з некалькімі праектамі. Тут разумным выбарам будзе арганізацыя доступу да дадзеных праз пул сэрвераў. У такім выпадку маецца магчымасць рэалізаваць адмоваўстойлівы доступ да кантэнту ў рэжыме 24/7 за кошт дубліравання ўсіх ключавых кампанентаў: серверы, каналы сувязі, камутатары і кантролеры СХД. Пастаянны доступ да дадзеных вельмі важны пры працяглай апрацоўцы відэаматэрыялу, бо нікому не хочацца губляць вялікую колькасць часу, напрыклад, з-за збою ў працэсе рэндэрынгу. Таксама пры наяўнасці пула сервераў ёсць магчымасць забяспечыць балансаванне нагрузкі для працоўных станцый з мэтай павышэння агульнай прадукцыйнасці.
-
Буйныя студыі, у тым ліку накіраваныя на шырокае вяшчанне. У такіх праектах адмоваўстойлівасць за кошт дубліравання кампанентаў ужо must have. Таксама для паскарэння ўсе асноўныя рэсурсаёмістыя працэсы па рэндэрынгу і пост апрацоўцы вынесены з працоўных станцый на спецыяльныя серверы, якія маюць максімальна хуткі доступ да СХД з кантэнтам. Больш за тое, часта прымяняецца рознаўзроўневае захоўванне дадзеных. Г.зн. выкарыстоўваюцца павольныя, але ёмістыя HDD для захоўвання зыходных матэрыялаў і архіва, а таксама хуткія SSD для аператыўнай працы і/ці кэшавання. У рамках адзінай СХД для гэтага ствараюцца некалькі пулаў з розных тыпаў носьбітаў, а таксама выкарыстоўваюцца аўтаматызаваныя сродкі тыпу и . У рэальна маштабных праектах шматузроўневую захоўванне дасягаецца за кошт выкарыстання некалькіх СХД, кожная з якіх захоўвае .
У якасці прыкладу рэалізацыі працы медыя студыі хочам прывесці арганізацыю працэсу апрацоўкі кантэнту на адной з тэлевяшчальных станцый Тайваня. Тут прымяняецца разумна дастатковая схема пабудовы сістэмы, апісаная ў пункце 2.
Увесь медыя кантэнт захоўваецца на СХД і паліцы пашырэння JBOD . У шасі і паліцу ўсталяваныя па 24 дыска NL-SAS аб'ёмам 14ТБ кожны. Канфігурацыя дыскавай прасторы:
- СХД – пул 24х RAID60
- Паліца пашырэння - пул 22х RAID60. 2 х hot spare
Пул сервераў для забеспячэння доступу да дадзеных - кластар з 4-х сервераў на базе Windows Server. Доступ да кантэнту арганізуецца праз пратакол CIFS. Фізічна ўсе 4 сервера маюць падлучэнне да СХД праз Fibre Channel 16G без выкарыстання камутатараў, . Доступ кліентаў да пула сервераў ажыццяўляецца праз сетку 10GbE. На кліентах выкарыстоўваецца ПЗ Edius v9 у асяроддзі Windows. Тыпы нагрузак:
- Праца з відэа 4K на 7 патокаў - 2 кліента
- Праца з відэа 2K на 13 патокаў - 10 кліентаў
У выніку пры паказаных нагрузках сістэма забяспечвае стабільную сумарную прадукцыйнасць 1500 МБ/С, якая з'яўляецца камфортнай для бягучай працы тэлестанцыі. У выпадку неабходнасці павелічэння дыскавай прасторы, заказчыку ўсяго толькі дастаткова дадаць дадатковыя паліцы і пашырыць існуючы масіў на новыя дыскі. Зразумела, усе гэтыя аперацыі можна зрабіць у рэжыме online, не перарываючы працоўныя працэсы.
Медыя заўсёды адыгрывалі важную ролю ў жыцці грамадства. Сёння гэта як ніколі раней прыкметна ў сувязі з развіццём стрымінгу і індустрыі забаў. "Цяжкі" кантэнт патрабуе сур'ёзнага падыходу пры пабудове рашэнняў па яго апрацоўцы. І адным з немалаважных элементаў у такім рашэнні з'яўляецца дыскавая падсістэма. Сістэма захоўвання дадзеных ідэальна ўпісваецца ў гэтую ролю, забяспечваючы надзейны і высакахуткасны доступ, а таксама лёгкасць пашырэння і нарошчванні прадукцыйнасці.
Крыніца: habr.com