Ин қисми аввали стенограммаи мусоҳибаи дуюм барои барномаи мост (, ). Шумораи меҳмонон - (), номзади илм, ходими калони илмии Маркази миллии тадқиқоти маърифатӣ, дотсенти факултети табдили рақамӣ.
Аз соли 2012 Андрей дар гурӯҳи тадқиқотии Визуализатсия ва Графикаи компютерӣ кор мекунад. Дар лоиҳаҳои бузурги амалӣ дар сатҳи давлатӣ ва байналмилалӣ машғул аст. Дар ин қисми сӯҳбат, мо дар бораи таҷрибаи ӯ дар дастгирии AR барои чорабиниҳои ҷамъиятӣ сӯҳбат мекунем.
фото (Unsplash.com)
Контекст ва ҳадафҳои лоиҳа
Рамзи вақт (аз ҷониби ) — соати 00:41
: Ман мехоҳам аз лоиҳаи Бозиҳои аврупоӣ оғоз кунам. Ин бисёрҷониба аст, якчанд даста дар омодагӣ ширкат доштанд ва таъмин намудани воқеияти афзоянда барои тамошобинони ҳазорон нафар дар вақти чорабинӣ дар варзишгоҳ кори хеле ҷиддӣ аст. Дар робита ба иштироки шумо, он аввалин нармафзор буд?
: Бале, мо қисми барномасозиро анҷом додем ва дар ҷараёни намоиш дастгирӣ кардем. Ҳама чизро дар вақти воқеӣ пайгирӣ, назорат ва оғоз кардан, инчунин бо гурӯҳи телевизионӣ кор кардан лозим буд. Агар ин лоидаро умуман ба назар гирем, пас дар бораи расми кушод ва пушида сухан рондан мумкин аст дар Минск, инчунин дар бораи маросими кушодашавии чемпионат дар Қазон. Ин як схемаи кор буд, аммо воқеаҳои гуногун. Байни онхо ду мох фосила буд. Лоиҳаро якҷоя бо бачаҳои ширкат омода кардем .
Мо бо онҳо тасодуфан вохӯрдем , ки тирамоҳи соли 2018 сурат гирифт. Донишҷӯёни магистри мо лоиҳаи курсии худро дар мавзӯи VR намоиш доданд. Бачаҳо ба назди мо омада, пурсиданд, ки дар лабораторияамон чӣ кор карда истодаем. Чунин менамуд:
— Шумо бо VR кор мекунед, аммо метавонед бо воқеияти афзоянда кор кунед?
- Бале, бале.
— Чунин вазифа, бо чунин мукаддимавй. Шумо инро карда метавонед?
Онҳо шалғамҳои худро каме харошиданд, ҳеҷ чизи ғайривоқеӣ ба назар намерасад:
— Кушиш кунем, ки аввал хама чизро омузем, баъд илочашро ёбем.
Дмитрий: Оё онҳо танҳо ба расонаҳо кумак мекунанд?
Андриёс: Онҳо як стек пур мекунанд. Онхо аз нуктаи назари рохбарй ва ташкилй ба режиссёркунй, ба сахнагузорй, интихоби декорация, таъминоти моддию техникй ва дигар таъминоти техникй комилан машгуланд. Аммо онҳо мехостанд, ки барои бозиҳои аврупоӣ як чизи махсусе анҷом диҳанд. Ин эффектҳои махсус, ба монанди воқеияти омехта, барои телевизион муддати тӯлонӣ сохта шудаанд, аммо онҳо аз ҷиҳати татбиқи техникӣ аз ҳама барои буҷа нестанд. Аз ин рӯ, бачаҳо вариантҳои алтернативӣ ҷустуҷӯ карданд.
Дмитрий: Биёед проблемаро муфассалтар мухокима кунем. Он аз чӣ иборат буд?
Андриёс: Ҳодисае ҳаст. Он якуним соат давом мекунад. Мо бояд боварӣ ҳосил кунем, ки тамошобиноне, ки онро мустақиман тамошо мекунанд ва онҳое, ки дар варзишгоҳ нишастаанд, эффектҳои воқеияти афзоишёфтаро дар ҳамоҳангсозии пурра бо намоиши мустақим аз ҷиҳати вақт ва макон дар сайт бубинанд.
Як қатор маҳдудиятҳои техникӣ вуҷуд доштанд. Тавассути Интернет ҳамоҳангсозии вақт ғайриимкон буд, зеро ҳарос аз сарбории аз ҳад зиёди шабака бо стендҳои пур ва эҳтимоли ҳузури сарони давлатҳо дар ин чорабинӣ вуҷуд дошт, ки метавонад шабакаҳои мобилиро халалдор кунад.
Андрей Карсаков, акс аз
Мо ду ҷузъи калидии ин лоиҳа доштем - таҷрибаи шахсӣ, ки одамон тавассути дастгоҳҳои мобилӣ метавонанд ба даст оранд ва он чизе, ки ба пахши телевизион ва экранҳои иттилоотӣ дар худи варзишгоҳ дохил мешавад.
Агар шахс ногаҳон тавассути дастгоҳи мобилӣ эпизодҳои воқеияти афзояндаро тамошо кунад ва ҳамзамон ба экран ворид шавад, ӯ бояд ҳамон расмро бубинад.
Ба мо ду системаи амалан гуногун лозим буд, то сари вақт комилан ҳамоҳанг карда шаванд. Аммо хусусияти чунин намоишҳо дар он аст, ки ин ҳодисаҳои мураккабе мебошанд, ки дар он шумораи зиёди хидматҳои техникӣ ҷалб карда мешаванд ва тамоми амалиётҳо мувофиқи рамзҳои вақт анҷом дода мешаванд. Рамзи вақт як лаҳзаи мушаххаси вақт аст, ки дар он чизе оғоз меёбад: нур, садо, рафтани одамон, кушодани гулҳои саҳна ва ғайра. Мо бояд ба ин система мутобиқ шавем, то ҳама чиз дар вақти лозима оғоз шавад. Хусусияти дигар ин буд, ки саҳнаҳо ва эпизодҳо бо воқеияти афзоянда бо сенария алоқаманд буданд.
Дмитрий: Аммо оё шумо тасмим гирифтед, ки аз истифодаи рамзҳои вақт бо сабаби хатари баланди ҳолатҳои форс-мажор даст кашед ё шумо дар аввал баъзе хусусиятҳои қудратро ҳисоб карда, дарк кардед, ки сарбории тамоми система хеле баланд хоҳад буд?
Андриёс: Агар шумо хидмати ҳамоҳангсозиро барои чунин аудитория созед, он қадар душвор нест. Дар ҳар сурат, дархостҳо дар як шабонарӯз ноком намешаванд. Бале, сарборӣ зиёд аст, аммо ин ҳолати фавқулодда нест. Савол ин аст, ки оё ба ин кор сарф кардани захираҳо ва вақт лозим аст, агар шабака ногаҳон хомӯш шавад. Мо боварӣ надоштем, ки ин рӯй нахоҳад дод. Дар ниҳоят, ҳама чиз кор кард, бо қатъшавӣ аз сабаби сарборӣ, аммо он кор кард ва мо мувофиқи коди вақт мувофиқи нақшаи дигар синхронизатсия кардем. Ин яке аз мушкилоти глобалӣ буд.
Мушкилоти амалӣ аз нуқтаи назари UX
Рамзи вақт (аз ҷониби ) — соати 10:42
Андриёс: Мо инчунин бояд ба назар гирем, ки стадион макони консерти классикӣ нест ва системаҳоро дар тамоми фазо барои дастгоҳҳои мобилӣ ҳамоҳанг созем. Ҳамин тавр, чанде пеш ман вирус шудам дар консертҳои Эминем, он гоҳ як парванда бо Лобода буд.
фото (Unsplash.com)
Аммо ин ҳамеша як таҷриба дар пеши шумост - тамоми издиҳом дар назди саҳна меистанд, ҳамоҳангсозӣ хеле оддӣ аст. Дар мавриди стадион, шумо бояд фаҳмед, ки шумо дар кадом тарафи доира ҳастед, мавқеи нисбӣ, то ки стадион ба фазое, ки дар муҳити виртуалӣ мавҷуд аст, мувофиқат кунад. Ин як мушкили талх буд. Онхо онро бо роххои гуногун хал карданй мешуданд ва нати-чааш ба он чи ки Лобода амалй карда буд, наздик буд, вале на аз хар чихат.
Мо ба корбар иҷозат медиҳем, ки ӯ дар куҷост. Мо барои стадион, ки одамон дар он чо сектор, катор, чойро интихоб мекарданд, нишондо-да кардем. Хамаи ин дар чор «клик». Минбаъд мо бояд самти саҳнаро муайян кунем. Барои ин, мо силуэтеро нишон додем, ки саҳна бояд аз нуқтаи назари фармоишӣ чӣ гуна бошад. Вай онро муттаҳид кард, клик кард ва ҳамин тавр - саҳна нишаст. Мо кӯшиш кардем, ки ин равандро то ҳадди имкон содда кунем. Бо вуҷуди ин, 90% тамошобиноне, ки мехостанд намоишро тамошо кунанд, он одамоне нестанд, ки таҷрибаи муошират бо воқеияти афзоишёфта доранд.
Дмитрий: Оё барои ин лоиҳа аризаи алоҳида вуҷуд дошт?
Андриёс: Бале, як барнома барои iOS ва Android, ки мо онро ба мағоза тела додем. Барои он як маъракаи таблиғотии алоҳида вуҷуд дошт. Он қаблан ба таври муфассал шарҳ дода шуда буд, ки чӣ гуна зеркашӣ кардан ва ғайра.
Дмитрий: Шумо бояд фаҳмед, ки барои шахс барои санҷиши ҷисмонӣ ва омӯхтани тарзи истифодаи чунин барнома ҷой нест. Аз ин ру, вазифаи «тарбия» шунавандагон мураккабтар гардид.
Андриёс: Ҳа Бале. Бо UX, мо зарбаҳои зиёдеро ба даст овардем, зеро корбар мехоҳад таҷрибаро бо се клик ба даст орад: зеркашӣ, насб, оғоз кард - он кор кард. Бисёр одамон барои риояи дастурҳои мураккаб, хондани дарсҳо ва ғайра танбал ҳастанд. Ва мо кӯшиш накардем, ки ҳама чизро ба корбар то ҳадди имкон фаҳмонем: дар ин ҷо тиреза кушода мешавад, дастрасӣ ба камера дар ин ҷо, вагарна кор намекунад ва ғайра. Новобаста аз он ки шумо чӣ қадар тавзеҳот нависед, новобаста аз он ки шумо чӣ қадар муфассал хоиданед, новобаста аз он ки кадом gifҳоро ворид кунед, одамон онро намехонанд.
Дар Минск мо як ҳавзи зиёди фикру мулоҳизаҳоро оид ба ин қисм ҷамъ овардем ва аллакай барои дархост дар Қазон бисёр чизҳоро тағир додем. Мо дар он ҷо на танҳо он фонограммаҳо ва рамзҳои вақтро, ки ба як эпизоди мушаххаси воқеияти афзоянда мувофиқанд, ҷойгир кардем, балки ҳамаи фонограммаҳо ва рамзҳои вақтро пурра гирифтем. Ҳамин тавр, барнома ҳангоми оғозёбӣ чӣ рӯй дода буд, шунид ва - агар шахс дар лаҳзаи нодуруст ворид шуда бошад, он маълумот дод: "Рафиқ, бубахшед, эпизоди AR-и шумо пас аз 15 дақиқа хоҳад буд."
Каме дар бораи меъморӣ ва равиши ҳамоҳангсозӣ
Рамзи вақт (аз ҷониби ) — соати 16:37
Дмитрий: Оё шумо қарор додед, ки бо садо ҳамоҳанг созед?
Андриёс: Оре, ин тасодуфй руй дод. Мо вариантҳоро ҷустуҷӯ мекардем ва ба як ширкат дучор омадем аз Ижевск. Онҳо SDK-и на махсусан мураккаб, балки оҳан кор мекунанд, ки ба шумо имкон медиҳад садоро бо вақт ҳамоҳанг созед. Система барои кор бо телевизион ҷойгир карда шудааст, вақте ки шумо метавонед чизеро дар барнома дар асоси садои таблиғи шартӣ намоиш диҳед ё дар асоси треки филм таҷрибаи интерактивӣ диҳед.
Дмитрий: Аммо ин як чиз аст - шумо дар меҳмонхонаи худ нишастаед ва чизи дигар - стадион бо ҳазорон нафар. Сифати сабти овоз ва эътирофи минбаъдаи он барои шумо чӣ гуна натиҷа дод?
Андриёс: Тарсу тарсу шубҳаҳо зиёд буданд, аммо дар аксар маврид ҳама чиз хуб эътироф мешуд. Онҳо бо алгоритмҳои маккоронаи худ дар суруди аудио имзоҳо месозанд - натиҷа аз файли аудиоии аслӣ камтар аст. Вақте ки микрофон садои атрофро гӯш мекунад, кӯшиш мекунад, ки ин хусусиятҳоро пайдо кунад ва дар асоси онҳо трекро эътироф кунад. Дар шароити хуб, дақиқии синхронизатсия 0,1-0,2 сонияро ташкил медиҳад. Ин беш аз кифоя буд. Дар шароити бад ихтилофот то 0,5 сонияро ташкил дод.
Бисёр чиз аз дастгоҳ вобаста аст. Мо бо парки калони дастгоххо кор мекардем. Барои iPhones танҳо 10 модел вуҷуд дорад. Онхо аз чихати сифат ва дигар хусусиятхо нагз кор карданд. Аммо бо андроидҳо боғи ҳайвонот мисли модари ман аст. На дар ҳама ҷо маълум шуд, ки синхронизатсияи садо кор кардааст. Ҳодисаҳое буданд, ки аз рӯи баъзе хусусиятҳо дар дастгоҳҳои гуногун шунидани сурудҳои гуногун ғайриимкон буд. Дар ҷое басомадҳои паст нопадид мешаванд, дар ҷое басомадҳои баланд ба ҳиҷоб шурӯъ мекунанд. Аммо агар дастгоҳ дар микрофон нормализатор дошта бошад, ҳамоҳангсозӣ ҳамеша кор мекард.
Дмитрий: Лутфан дар бораи меъморӣ ба мо нақл кунед - дар лоиҳа чӣ истифода шудааст?
Андриёс: Мо барномаро дар Unity сохтем - соддатарин вариант аз нигоҳи бисёрплатформа ва кор бо графика. Фонди AR истифода шудааст. Мо дарҳол гуфтем, ки мо намехоҳем системаро мураккаб созем, аз ин рӯ мо худро бо як парки дастгоҳҳое, ки ARKit ва ARCore-ро дастгирӣ мекунанд, маҳдуд кардем, то ҳама чизро озмоиш кунем. Мо барои DigitalSoft SDK плагин сохтем, он . Мо системаи идоракунии мундариҷаро эҷод кардем, то скриптҳо мувофиқи ҷадвали вақт кор кунанд.
Мо каме бо системаи заррачаҳо кор кардем, зеро корбар метавонад дар вақти дилхоҳ дар як эпизоди мушаххас ворид шавад ва ба мо лозим аст, ки ҳама чизро аз лаҳзаи ҳамоҳангсозӣ бубинад. Мо бо системае кор кардем, ки имкон медиҳад сенарияҳо сари вақт ба таври возеҳ иҷро карда шаванд, то таҷрибаи XNUMXD мисли филм ба пеш ва пас ҳаракат карда шавад. Гарчанде ки он аз қуттӣ бо аниматсияҳои классикӣ кор мекунад, мо маҷбур шудем, ки бо системаҳои заррачаҳо кор кунем. Дар баъзе лаҳзаҳо, онҳо ба тухмпошӣ шурӯъ мекунанд ва агар шумо худро дар ҷое пеш аз нуқтаи тухмшавӣ пайдо кунед, онҳо ҳанӯз таваллуд нашудаанд, гарчанде ки ба назар чунин менамояд, ки онҳо бояд бошанд. Аммо ин мушкилот воқеан хеле осон аст.
Барои қисми мобилӣ, меъморӣ хеле содда аст. Барои пахши телевизион ҳама чиз мураккабтар аст. Мо маҳдудиятҳои сахтафзор доштем. Фармоишгар шарт гузошт: «Дар ин чо фалон парки аппаратура дорем, тахминан гуем, дар ин чо хама кор бояд кард». Мо фавран ба он таваҷҷӯҳ кардем, ки мо бо кортҳои сабти видеоии нисбатан буҷавӣ кор хоҳем кард. Аммо буҷет маънои онро надорад, ки онҳо бад ҳастанд.
Дар сахтафзор, кортҳои сабти видео ва шароити корӣ маҳдудиятҳо вуҷуд доштанд - мо бояд тасвирро чӣ гуна қабул кунем. Кортҳои аксбардорӣ - Blackmagic Design, ки мувофиқи нақшаи калидҳои дохилӣ кор мекунад - ин вақте аст, ки чаҳорчӯбаи видео аз камера ба шумо меояд. Корт дорои микросхемаҳои коркарди худро дорад, ки дар он чаҳорчӯба низ гузошта шудааст, ки бояд дар болои сими воридотӣ ҷойгир карда шавад. Корт онҳоро омехта мекунад - мо дар он ҷо ба чизи дигаре даст намерасонем ва ба чаҳорчӯбаи камераи видеоӣ таъсир намерасонем. Вай натиҷаро тавассути баромади видео ба утоқи идоракунӣ туф мекунад. Ин як усули хуб барои қабати сарлавҳаҳо ва дигар чизҳои шабеҳ аст, аммо он барои эффектҳои воқеияти омехта чандон мувофиқ нест, зеро дар лӯлаи рендер маҳдудиятҳои зиёде мавҷуданд.
Дмитрий: Дар робита ба ҳисоббарории вақти воқеӣ, ҳатмии объект ё чизи дигар?
Андриёс: Аз чихати сифат ва ба даст овардани самараи дилхох. Зеро мо намедонем, ки тасвирро дар болои чӣ мегузорем. Мо танҳо маълумоти рангӣ ва шаффофиятро дар болои ҷараёни аслӣ мефиристем. Баъзе эффектҳо ба монанди рефраксияҳо, шаффофияти дуруст, сояҳои иловагӣ бо ин схема ба даст овардан мумкин нест. Барои ин, шумо бояд ҳама чизро якҷоя кунед. Масалан, ягон роҳи эҷоди таъсири таҳрифи ҳаво аз оташ ё асфалти гарм вуҷуд надорад. Ин барои интиқоли эффекти шаффофият бо назардошти шохиси шикастани. Мо дар аввал мундариҷаро дар асоси ин маҳдудиятҳо таҳия кардем ва кӯшиш кардем, ки эффектҳои мувофиқро истифода барем.
Дмитрий: Оё шумо аллакай дар лоиҳаи аввалини Бозиҳои аврупоӣ мундариҷаи худро доштед?
Андриёс: Не, марҳилаи асосии таҳияи мундариҷаро бачаҳо аз Sechenov.com анҷом доданд. Рассомҳои графикии онҳо мундариҷаи асосиро бо аниматсияҳо ва чизҳои дигар кашиданд. Ва мо ҳама чизро ба муҳаррик ворид кардем, эффектҳои иловагӣ илова кардем ва онро мутобиқ кардем, то ҳама чиз дуруст кор кунад.
Агар мо дар бораи лӯла гап занем, пас барои пахши телевизионӣ мо ҳама чизро дар Unreal Engine 4 ҷамъ кардем. Тасодуфан, онҳо маҳз дар ҳамин лаҳза асбобҳои худро барои воқеияти омехта такмил доданд. Маълум шуд, ки ҳама чиз он қадар оддӣ нест. Холо хам тамоми асбобхо хоманд, бисьёр корхоро дастй ба охир расондан лозим омад. Дар Минск мо дар болои сохти фармоишии двигатель кор кардем, яъне мо баъзе чизхоро дар дохили двигатель аз нав навиштем, то ки масалан, дар болои объектхои хакикй сояхо кашем. Версияи муҳаррик, ки дар он вақт ҷорӣ буд, хусусиятҳое надоштанд, ки имкон медиҳанд, ки ин бо истифода аз асбобҳои стандартӣ анҷом дода шавад. Аз ин сабаб, бачаҳои мо маҷлиси фармоишии худро сохтанд, то ҳама чизҳои ҳаётан заруриро таъмин кунанд.
Дигар нозукиҳо ва мутобиқшавӣ ба WorldSkills дар Қазон
Рамзи вақт (аз ҷониби ) — соати 31:37
Дмитрий: Аммо хамаи ин дар як муддати кутох?
Андриёс: Мӯҳлатҳо танг буданд , мувофики Минск — муътадил. Такрибан шаш мох барои тараккиёт, вале бо назардошти он ки шаш кас чалб карда шудааст. Дар баробари ин мо қисмати сайёр месозем ва асбобҳои истеҳсоли телевизионро таҳия мекардем. На танҳо баромади тасвир вуҷуд дошт. Масалан, системаи пайгирӣ бо оптика, барои ин шумо бояд асбобҳои худро эҷод кунед.
Дмитрий: Оё ягон мутобиқшавӣ аз як лоиҳа ба лоиҳаи дигар вуҷуд дошт? Пас аз якуним моҳ, лозим буд, ки аз пешрафтҳо истифода бурда, лоиҳаро бо мундариҷаи нав ба сайти нав интиқол диҳед?
Андриёс: Бале, якуним моҳ буд. Мо баъд аз лоињаи Минск барои тамоми даста таътили дуњафтаинаро ба наќша гирифта будем. Аммо дарҳол пас аз баста шудан, бачаҳои Sechenov.com омада, мегӯянд: "Хуб, биёед Қазонро кунем." Мо то ҳол каме истироҳат кардем, аммо ба ин лоиҳа зуд гузаштем. Якчанд корхои техникиро анчом додем. Бештари вақт барои мундариҷа сарф мешуд, зеро барои WorldSkills мо онро комилан иҷро кардем, мо онро танҳо бо дастаи истеҳсолӣ ҳамоҳанг кардем. Аз тарафи онҳо танҳо як сценарий вуҷуд дошт. Аммо ин осонтар буд - ба такрори иловагӣ лозим набуд. Вақте ки шумо мундариҷаро худатон эҷод мекунед, шумо фавран мебинед, ки он дар муҳаррик чӣ гуна кор мекунад ва шумо метавонед зуд таҳрир ва ҳамоҳанг созед.
Дар мавриди қисми мобилӣ, мо тамоми нозукиҳоеро, ки дар Минск доштем, ба назар гирифтем. Мо тарҳи нави барнома сохтем, меъмориро каме аз нав тарҳрезӣ кардем, дарсҳо илова кардем, аммо кӯшиш кардем, ки онро то ҳадди имкон кӯтоҳ ва равшан созем. Мо шумораи қадамҳои корбарро аз оғози барнома то тамошои мундариҷа кам кардем. Якуним моҳ барои анҷом додани лоиҳаи мувофиқ кифоя буд. Пас аз якуним ҳафта мо ба макон расидем. Дар он чо кор кардан осонтар буд, зеро тамоми назорат аз болои лоида дар дасти ташкилотчиён буд, бо дигар комитетдо мутобик кардан лозим набуд. Дар Қазон кор кардан осонтар ва осонтар буд ва хеле муқаррарӣ буд, ки вақт кам буд.
Дмитрий: Аммо оё шумо тасмим гирифтед, ки равиши синхронизатсияро дар асоси садо тарк кунед?
Андриёс: Бале, мо онро бо овоз мондаем. Ин хуб кор кард. Чунон ки мегуянд, агар кор кунад, даст назан. Мо танҳо нозукиҳои сифати треки аудиоро ба назар гирифтем. Вақте ки онҳо муқаддима карданд, як эпизоди омӯзишӣ вуҷуд дошт, ки одамон пеш аз оғози намоиш кӯшиш кунанд. Тааҷҷубовар буд, ки вақте ки дар вақти навохтани трек дар стадион чапакзании пурмавчи «зинда» ба амал меояд, система ба шумо имкон медиҳад, ки бо ин трек хуб ҳамоҳанг созед, аммо агар дар айни замон чапакзании сабтшуда бо трек омехта шавад, пас трек дигар гирифта намешавад. Чунин нозукиҳо ба назар гирифта шуданд ва ҳама чиз аз ҷиҳати садо хеле хуб ҳамоҳанг карда шуд.
PS Дар қисми дуюми шумора мо дар бораи визуализатсияи маълумотҳои илмӣ, моделсозии равандҳо дар лоиҳаҳои дигар, таҳияи бозӣ ва барномаи магистрӣ сӯҳбат мекунем." Идомаи онро дар мақолаи навбатӣ нашр хоҳем кард. Шумо метавонед моро дар инҷо гӯш кунед ва дастгирӣ кунед:
Дар ҳамин ҳол, PPS, дар версияи англисии Habr: .
Манбаъ: will.com