પોડકાસ્ટ “ITMO સંશોધન_”: સમગ્ર સ્ટેડિયમના સ્કેલ પર શો સાથે AR સામગ્રીના સિંક્રોનાઇઝેશનનો સંપર્ક કેવી રીતે કરવો

અમારા પ્રોગ્રામ માટે બીજા ઇન્ટરવ્યુના ટેક્સ્ટ ટ્રાન્સક્રિપ્ટનો આ પ્રથમ ભાગ છે (એપલ પોડકાસ્ટ, યાન્ડેક્ષ.મ્યુઝિક). અંક મહેમાન - આન્દ્રે કારસાકોવ (kapc3d), Ph.D., નેશનલ સેન્ટર ફોર કોગ્નિટિવ રિસર્ચના વરિષ્ઠ સંશોધક, ડિજિટલ ટ્રાન્સફોર્મેશન ફેકલ્ટીના સહયોગી પ્રોફેસર.

2012 થી, એન્ડ્રી સંશોધન જૂથ વિઝ્યુલાઇઝેશન અને કમ્પ્યુટર ગ્રાફિક્સમાં કામ કરી રહ્યો છે. રાજ્ય અને આંતરરાષ્ટ્રીય સ્તરે મોટા લાગુ પ્રોજેક્ટ્સમાં રોકાયેલા. વાતચીતના આ ભાગમાં, અમે સાર્વજનિક કાર્યક્રમો માટે AR સમર્થનમાં તેમના અનુભવ વિશે વાત કરીએ છીએ.

ફોટો આ ઇજિનીયરિંગ રેંગ (Unsplash.com)

પ્રોજેક્ટ સંદર્ભ અને ઉદ્દેશ્યો

ટાઈમકોડ (દ્વારા ઓડિયો આવૃત્તિઓ) — 00:41

દિમિત્રીકાબાનોવ: હું યુરોપિયન ગેમ્સ પ્રોજેક્ટ સાથે પ્રારંભ કરવા માંગુ છું. તે બહુ-ઘટક છે, ઘણી ટીમોએ તૈયારીમાં ભાગ લીધો હતો, અને સ્ટેડિયમમાં એક ઇવેન્ટ દરમિયાન હજારો પ્રેક્ષકોને સંવર્ધિત વાસ્તવિકતા પ્રદાન કરવી એ એક ગંભીર કાર્ય છે. તમારી સંડોવણીના સંદર્ભમાં, શું તે પ્રથમ સોફ્ટવેર હતું?

kapc3d: હા, અમે પ્રોગ્રામિંગ ભાગ કર્યો અને શો દરમિયાન સપોર્ટ પૂરો પાડ્યો. રીઅલ ટાઇમમાં બધું ટ્રૅક કરવું, મોનિટર કરવું અને લોન્ચ કરવું જરૂરી હતું અને ટેલિવિઝન જૂથ સાથે પણ કામ કરવું જરૂરી હતું. જો આપણે આ પ્રોજેક્ટને સંપૂર્ણ રીતે ધ્યાનમાં લઈએ, તો આપણે ઉદઘાટન અને સમાપન સમારોહ વિશે વાત કરી શકીએ યુરોપિયન ગેમ્સ મિન્સ્કમાં, તેમજ ચેમ્પિયનશિપના ઉદઘાટન સમારોહ વિશે વિશ્વ કૌશલ્ય કાઝાનમાં. તે સમાન કાર્ય યોજના હતી, પરંતુ વિવિધ ઇવેન્ટ્સ. તેમની વચ્ચે બે મહિનાનું અંતર હતું. અમે કંપનીના લોકો સાથે મળીને પ્રોજેક્ટ તૈયાર કર્યો સેચેનોવ.કોમ.

અમે તેમને તક દ્વારા મળ્યા સાયન્સ ફેસ્ટ, જે 2018 ના પાનખરમાં થયું હતું. અમારા માસ્ટરના વિદ્યાર્થીઓએ VR વિષય પર તેમના કોર્સ પ્રોજેક્ટનું પ્રદર્શન કર્યું. છોકરાઓ અમારી પાસે આવ્યા અને પૂછ્યું કે અમે અમારી લેબોરેટરીમાં શું કરી રહ્યા છીએ. તે કંઈક આના જેવું દેખાતું હતું:

— તમે VR સાથે કામ કરો છો, પરંતુ શું તમે ઓગમેન્ટેડ રિયાલિટી સાથે કામ કરી શકો છો?

- સારું, હા.

- આવા પ્રારંભિક નોંધો સાથે, આવા કાર્ય છે. તમે તે કરી શકો છો?

તેઓએ તેમના સલગમને થોડું ખંજવાળ્યું, ત્યાં કંઈપણ અવાસ્તવિક લાગતું નથી:

- ચાલો પહેલા દરેક વસ્તુનો અભ્યાસ કરવાનો પ્રયાસ કરીએ, અને પછી ઉકેલ શોધીએ.

દિમિત્રી: શું તેઓ માત્ર મીડિયા સપોર્ટ પ્રદાન કરે છે?

એન્ડ્ર્યુ: તેઓ સંપૂર્ણ સ્ટેક બનાવે છે. મેનેજમેન્ટ અને સંસ્થાના દૃષ્ટિકોણથી, તેઓ નિર્દેશન, સ્ટેજીંગ, દૃશ્યાવલિની પસંદગી, લોજિસ્ટિક્સ અને અન્ય તકનીકી સહાયમાં સંપૂર્ણપણે સંકળાયેલા છે. પરંતુ તેઓ યુરોપિયન ગેમ્સ માટે કંઈક ખાસ કરવા માંગતા હતા. આ વિશેષ અસરો, મિશ્ર વાસ્તવિકતાની જેમ, ટેલિવિઝન માટે ઘણા લાંબા સમયથી બનાવવામાં આવી છે, પરંતુ તે તકનીકી અમલીકરણની દ્રષ્ટિએ સૌથી વધુ બજેટ-ફ્રેંડલી નથી. તેથી, છોકરાઓએ વૈકલ્પિક વિકલ્પોની શોધ કરી.

દિમિત્રી: ચાલો સમસ્યાની વધુ વિગતવાર ચર્ચા કરીએ. તે શું સમાવે છે?

એન્ડ્ર્યુ: એક પ્રસંગ છે. તે દોઢ કલાક ચાલે છે. અમારે એ સુનિશ્ચિત કરવાની જરૂર છે કે પ્રેક્ષકો તેને લાઈવ જોઈ રહ્યા છે અને સ્ટેડિયમમાં બેઠેલા લોકો ઓગમેન્ટેડ રિયાલિટી ઈફેક્ટ્સને સાઇટ પર સમય અને સ્થાનના સંદર્ભમાં લાઈવ શો સાથે સંપૂર્ણ સિંક્રનાઇઝેશનમાં જોઈ શકે છે.

ત્યાં સંખ્યાબંધ તકનીકી મર્યાદાઓ હતી. ઈન્ટરનેટ દ્વારા સમય સુમેળ કરવાનું અશક્ય હતું, કારણ કે સંપૂર્ણ સ્ટેન્ડ સાથે નેટવર્ક પર અતિશય લોડ અને ઇવેન્ટમાં રાજ્યના વડાઓની હાજરીની સંભાવના વિશે ભય હતો, જે મોબાઇલ નેટવર્કને જામ કરી શકે છે.

આન્દ્રે કાર્સાકોવ, ફોટો ITMO યુનિવર્સિટીમાંથી સામગ્રી
અમારી પાસે આ પ્રોજેક્ટના બે મુખ્ય ઘટકો હતા - વ્યક્તિગત અનુભવ કે જે લોકો મોબાઇલ ઉપકરણો દ્વારા મેળવી શકે છે, અને સ્ટેડિયમમાં જ ટેલિવિઝન પ્રસારણ અને માહિતી સ્ક્રીનોમાં શું જાય છે.

જો અચાનક કોઈ વ્યક્તિ મોબાઈલ ડિવાઈસ દ્વારા ઓગમેન્ટેડ રિયાલિટીના એપિસોડ જોઈ રહ્યો હોય અને તે જ સમયે સ્ક્રીન પર આવે, તો તેણે તે જ ચિત્ર જોવું જોઈએ.

સમયસર સંપૂર્ણપણે સમન્વયિત થવા માટે અમને બે વર્ચ્યુઅલ રીતે અલગ સિસ્ટમ્સની જરૂર હતી. પરંતુ આવા શોની ખાસિયત એ છે કે આ જટિલ ઘટનાઓ છે જેમાં મોટી સંખ્યામાં ટેકનિકલ સેવાઓ સામેલ છે અને તમામ કામગીરી સમય કોડ અનુસાર કરવામાં આવે છે. સમય કોડ એ સમયની ચોક્કસ ક્ષણ છે જ્યાં કંઈક શરૂ થાય છે: પ્રકાશ, ધ્વનિ, લોકો જતા રહે છે, સ્ટેજની પાંખડીઓ ખુલે છે, વગેરે. અમારે આ સિસ્ટમને અનુકૂલન કરવું પડ્યું જેથી બધું યોગ્ય સમયે શરૂ થાય. બીજી વિશેષતા એ હતી કે ઓગમેન્ટેડ રિયાલિટી સાથેના દ્રશ્યો અને એપિસોડ સ્ક્રિપ્ટ-સંબંધિત હતા.

દિમિત્રી: પરંતુ શું તમે ફોર્સ મેજ્યુરના ઉચ્ચ જોખમોને કારણે સમય કોડનો ઉપયોગ છોડી દેવાનું નક્કી કર્યું છે, અથવા તમે શરૂઆતમાં કેટલીક પાવર લાક્ષણિકતાઓની ગણતરી કરી છે અને સમજ્યું છે કે સમગ્ર સિસ્ટમ પરનો ભાર ઘણો વધારે હશે?

એન્ડ્ર્યુ: જો તમે આવા પ્રેક્ષકો માટે સિંક્રનાઇઝેશન સેવા બનાવો છો, તો તે ખૂબ મુશ્કેલ નથી. કોઈપણ કિસ્સામાં, વિનંતીઓ રાતોરાત નિષ્ફળ જશે નહીં. હા, ભાર વધારે છે, પરંતુ તે કટોકટી નથી. પ્રશ્ન એ છે કે જો નેટવર્ક અચાનક નીકળી જાય તો શું આના પર સંસાધનો અને સમય ખર્ચવા યોગ્ય છે. અમને ખાતરી ન હતી કે આવું નહીં થાય. આખરે, લોડને કારણે વિક્ષેપો સાથે, બધું કામ કર્યું, પરંતુ તે કામ કર્યું, અને અમે એક અલગ યોજના અનુસાર સમય કોડ અનુસાર સિંક્રનાઇઝ કર્યું. આ વૈશ્વિક પડકારોમાંનો એક હતો.

UX દૃષ્ટિકોણથી અમલીકરણની મુશ્કેલીઓ

ટાઈમકોડ (દ્વારા ઓડિયો આવૃત્તિઓ) — 10:42

એન્ડ્ર્યુ: અમારે એ પણ ધ્યાનમાં લેવું પડ્યું કે સ્ટેડિયમ એ ક્લાસિક કોન્સર્ટ સ્થળ નથી, અને મોબાઇલ ઉપકરણો માટે સમગ્ર જગ્યામાં સિસ્ટમને સિંક્રનાઇઝ કરવી પડશે. તેથી, થોડા સમય પહેલા હું વાયરલ થયો હતો સંવર્ધિત વાસ્તવિકતા વાર્તા એમિનેમ કોન્સર્ટમાં, પછી લોબોડા સાથે એક કેસ હતો.

ફોટો રોબર્ટ બાય (Unsplash.com)
પરંતુ આ હંમેશા તમારી સામે એક અનુભવ છે - સમગ્ર ભીડ સ્ટેજની સામે ઉભી છે, સિંક્રનાઇઝેશન એકદમ સરળ છે. સ્ટેડિયમના કિસ્સામાં, તમારે એ સમજવાની જરૂર છે કે તમે વર્તુળની કઈ બાજુ પર છો, સંબંધિત સ્થિતિ, જેથી સ્ટેડિયમ વર્ચ્યુઅલ વાતાવરણમાં અસ્તિત્વમાં છે તે જગ્યામાં ફિટ થઈ શકે. તે એક ખાટો પડકાર હતો. તેઓએ તેને વિવિધ રીતે હલ કરવાનો પ્રયાસ કર્યો, અને પરિણામ લોબોડા દ્વારા અમલમાં મૂકાયેલ કેસની નજીકનો કેસ હતો, પરંતુ બધી બાબતોમાં નહીં.

અમે વપરાશકર્તાને તે ક્યાં છે તે નક્કી કરવા દો. અમે સ્ટેડિયમ માટે નિશાનો બનાવ્યા, જ્યાં લોકોએ સેક્ટર, એક પંક્તિ, સ્થાન પસંદ કર્યું. આ બધું ચાર "ક્લિકો" માં. આગળ અમારે સ્ટેજની દિશા નક્કી કરવાની હતી. આ કરવા માટે, અમે કસ્ટમ પરિપ્રેક્ષ્યમાં દ્રશ્ય લગભગ કેવું હોવું જોઈએ તેનું સિલુએટ બતાવ્યું. તેણે તેને જોડ્યું, ટેપ કર્યું અને બસ - સ્ટેજ નીચે બેઠો. અમે આ પ્રક્રિયાને શક્ય તેટલી સરળ બનાવવાનો પ્રયાસ કર્યો. તેમ છતાં, 90% દર્શકો કે જેઓ આ શો જોવા માંગે છે તે એવા લોકો નથી કે જેમને સંવર્ધિત વાસ્તવિકતા સાથે વાતચીત કરવાનો અનુભવ હોય.

દિમિત્રી: શું આ પ્રોજેક્ટ માટે અલગ અરજી હતી?

એન્ડ્ર્યુ: હા, iOS અને Android માટે એક એપ્લિકેશન, જેને અમે સ્ટોર પર દબાણ કર્યું. તેના માટે એક અલગ પ્રચાર અભિયાન હતું. તે કેવી રીતે ડાઉનલોડ કરવું અને તેથી વધુ વિગતવાર વર્ણવેલ હતું.

દિમિત્રી: તમારે એ સમજવાની જરૂર છે કે વ્યક્તિ માટે શારીરિક પરીક્ષણ અને આવી એપ્લિકેશનનો ઉપયોગ કેવી રીતે કરવો તે શીખવા માટે કોઈ સ્થાન નથી. તેથી, પ્રેક્ષકોને "શિક્ષિત" કરવાનું કાર્ય વધુ જટિલ બન્યું.

એન્ડ્ર્યુ: હા હા. UX સાથે, અમે ઘણી બધી મુશ્કેલીઓ પકડી, કારણ કે વપરાશકર્તા ત્રણ ક્લિક્સમાં અનુભવ મેળવવા માંગે છે: ડાઉનલોડ, ઇન્સ્ટોલ, લોન્ચ - તે કામ કર્યું. ઘણા લોકો જટિલ ટ્યુટોરિયલ્સ, ટ્યુટોરિયલ વાંચવા વગેરેને અનુસરવામાં ખૂબ આળસુ હોય છે. અને અમે ટ્યુટોરીયલમાં વપરાશકર્તાને શક્ય તેટલું બધું સમજાવવાનો પ્રયાસ કર્યો નથી: અહીં એક વિન્ડો ખુલશે, અહીં કૅમેરાને ઍક્સેસ કરો, અન્યથા તે કામ કરશે નહીં, વગેરે. તમે ગમે તેટલા ખુલાસાઓ લખો, તમે ગમે તેટલી વિગતવાર ચાવ્યું હોય, તમે ગમે તે gif દાખલ કરો, લોકો તેને વાંચતા નથી.

મિન્સ્કમાં અમે આ ભાગ પર પ્રતિસાદનો મોટો પૂલ એકત્રિત કર્યો, અને કાઝાનમાં એપ્લિકેશન માટે પહેલેથી જ ઘણું બદલાઈ ગયું છે. અમે ત્યાં ફક્ત તે ફોનોગ્રામ્સ અને તે સમય કોડ્સ મૂક્યા નથી જે સંવર્ધિત વાસ્તવિકતાના ચોક્કસ એપિસોડને અનુરૂપ છે, પરંતુ અમે તમામ ફોનોગ્રામ્સ અને સમય કોડને તેમની સંપૂર્ણતામાં લીધા છે. તેથી એપ્લિકેશને સાંભળ્યું કે લૉન્ચ સમયે શું થઈ રહ્યું હતું, અને - જો કોઈ વ્યક્તિ ખોટી ક્ષણે લૉગ ઇન કરે છે - તો તે માહિતી આપે છે: "સાથી, મને માફ કરશો, તમારો AR એપિસોડ 15 મિનિટમાં આવશે."

આર્કિટેક્ચર અને સિંક્રનાઇઝેશન માટેના અભિગમ વિશે થોડું

ટાઈમકોડ (દ્વારા ઓડિયો આવૃત્તિઓ) — 16:37

દિમિત્રી: શું તમે ધ્વનિ દ્વારા સિંક્રનાઇઝ કરવાનું નક્કી કર્યું છે?

એન્ડ્ર્યુ: હા, તે અકસ્માતે થયું. અમે વિકલ્પો શોધી રહ્યા હતા અને એક કંપની સામે આવ્યા સિફ્રાસોફ્ટ ઇઝેવસ્કથી. તેઓ ખાસ કરીને સુસંસ્કૃત નથી, પરંતુ આયર્ન-વર્કિંગ એસડીકે બનાવે છે, જે તમને સમય સાથે અવાજને સિંક્રનાઇઝ કરવાની મંજૂરી આપે છે. જ્યારે તમે શરતી જાહેરાતના અવાજના આધારે એપ્લિકેશનમાં કંઈક પ્રદર્શિત કરી શકો છો અથવા મૂવી ટ્રેક પર આધારિત ઇન્ટરેક્ટિવ અનુભવ આપી શકો છો ત્યારે સિસ્ટમ ટીવી સાથે કામ કરવા માટે સ્થિત હતી.

દિમિત્રી: પરંતુ તે એક વસ્તુ છે - તમે તમારા લિવિંગ રૂમમાં બેઠા છો, અને બીજી વસ્તુ - હજારો લોકો સાથેનું સ્ટેડિયમ. ધ્વનિ રેકોર્ડિંગની ગુણવત્તા અને તેની અનુગામી માન્યતા સાથે વસ્તુઓ તમારા માટે કેવી રીતે કામ કરી શકે છે?

એન્ડ્ર્યુ: ત્યાં ઘણા બધા ડર અને શંકાઓ હતી, પરંતુ મોટાભાગના કિસ્સાઓમાં બધું સારી રીતે ઓળખવામાં આવ્યું હતું. તેઓ તેમના ઘડાયેલું અલ્ગોરિધમ્સ સાથે ઓડિયો ટ્રેક પર હસ્તાક્ષર બનાવે છે - પરિણામ મૂળ ઑડિઓ ફાઇલ કરતાં ઓછું વજન ધરાવે છે. જ્યારે માઇક્રોફોન આસપાસના અવાજને સાંભળે છે, ત્યારે તે આ સુવિધાઓ શોધવાનો અને તેના આધારે ટ્રેકને ઓળખવાનો પ્રયાસ કરે છે. સારી સ્થિતિમાં, સિંક્રનાઇઝેશનની ચોકસાઈ 0,1-0,2 સેકન્ડ છે. આ પર્યાપ્ત કરતાં વધુ હતું. ખરાબ સ્થિતિમાં વિસંગતતા 0,5 સેકન્ડ સુધી હતી.

ઉપકરણ પર ઘણું નિર્ભર છે. અમે ઉપકરણોના મોટા કાફલા સાથે કામ કર્યું. iPhones માટે માત્ર 10 મોડલ છે. તેઓએ ગુણવત્તા અને અન્ય સુવિધાઓના સંદર્ભમાં સારું કામ કર્યું. પરંતુ એન્ડ્રોઇડ સાથે ઝૂ મારી માતા જેવું છે. દરેક જગ્યાએ તે બહાર આવ્યું નથી કે ધ્વનિ સિંક્રનાઇઝેશન કામ કરે છે. એવા કિસ્સાઓ હતા જ્યારે કેટલીક વિચિત્રતાને લીધે વિવિધ ઉપકરણો પર વિવિધ ટ્રેક સાંભળવું અશક્ય હતું. ક્યાંક નીચી ફ્રીક્વન્સી અદૃશ્ય થઈ જાય છે, તો ક્યાંક ઉચ્ચ ફ્રીક્વન્સી ધ્રૂજવા લાગે છે. પરંતુ જો ઉપકરણમાં માઇક્રોફોન પર નોર્મલાઇઝર હોય, તો સિંક્રનાઇઝેશન હંમેશા કામ કરે છે.

દિમિત્રી: કૃપા કરીને અમને આર્કિટેક્ચર વિશે કહો - પ્રોજેક્ટમાં શું વપરાયું હતું?

એન્ડ્ર્યુ: અમે યુનિટીમાં એપ્લિકેશન બનાવી છે - મલ્ટિ-પ્લેટફોર્મ અને ગ્રાફિક્સ સાથે કામ કરવાની દ્રષ્ટિએ સૌથી સરળ વિકલ્પ. વપરાયેલ AR ફાઉન્ડેશન. અમે તરત જ કહ્યું કે અમે સિસ્ટમને જટિલ બનાવવા માંગતા નથી, તેથી અમે દરેક વસ્તુને ચકાસવા માટે સમય મળે તે માટે ARKit અને ARCore ને સપોર્ટ કરતા ઉપકરણોના કાફલા સુધી અમારી જાતને મર્યાદિત કરી દીધી. અમે DigitalSoft SDK માટે પ્લગઇન બનાવ્યું છે, તે અમારા GitHub પર છે. અમે કન્ટેન્ટ મેનેજમેન્ટ સિસ્ટમ બનાવી છે જેથી સ્ક્રિપ્ટો સમયરેખા અનુસાર ચાલે.

અમે પાર્ટિકલ સિસ્ટમ સાથે થોડું ટિંકર કર્યું, કારણ કે વપરાશકર્તા કોઈ ચોક્કસ એપિસોડમાં કોઈપણ સમયે દાખલ થઈ શકે છે, અને અમારે તેને તે ક્ષણથી બધું જોવાની જરૂર છે જ્યાંથી તેણે સિંક્રનાઇઝ કર્યું. અમે એવી સિસ્ટમ સાથે ટિંકર કર્યું છે જે દૃશ્યોને સમયસર સ્પષ્ટ રીતે ચલાવવાની મંજૂરી આપે છે, જેથી XNUMXD અનુભવને મૂવીની જેમ આગળ પાછળ સ્ક્રોલ કરી શકાય. જ્યારે તે ક્લાસિક એનિમેશન સાથે બોક્સની બહાર કામ કરે છે, ત્યારે અમારે પાર્ટિકલ સિસ્ટમ્સ સાથે ટિંકર કરવું પડ્યું હતું. અમુક બિંદુએ, તેઓ જન્મવાનું શરૂ કરે છે, અને જો તમે સ્પાન બિંદુ પહેલાં તમારી જાતને ક્યાંક શોધી શકો છો, તો તેઓ હજુ સુધી જન્મ્યા નથી, જો કે એવું લાગે છે કે તેઓ હોવા જોઈએ. પરંતુ આ સમસ્યા વાસ્તવમાં ઉકેલવા માટે એકદમ સરળ છે.

મોબાઇલ ભાગ માટે, આર્કિટેક્ચર એકદમ સરળ છે. ટેલિવિઝન પ્રસારણ માટે બધું વધુ જટિલ છે. અમે હાર્ડવેર પ્રતિબંધો હતા. ગ્રાહકે એક શરત મૂકી: "અહીં અમારી પાસે આવા અને આવા હાર્ડવેર પાર્ક છે, લગભગ કહીએ તો, દરેક વસ્તુ પર કામ કરવાની જરૂર છે." અમે તરત જ એ હકીકત પર ધ્યાન કેન્દ્રિત કર્યું કે અમે પ્રમાણમાં બજેટ વિડિયો કેપ્ચર કાર્ડ્સ સાથે કામ કરીશું. પરંતુ બજેટનો અર્થ એ નથી કે તેઓ ખરાબ છે.

હાર્ડવેર પર, વિડિયો કેપ્ચર કાર્ડ્સ પર અને કામ કરવાની પરિસ્થિતિઓ પર પ્રતિબંધો હતા - આપણે ચિત્ર કેવી રીતે પ્રાપ્ત કરવું જોઈએ. કેપ્ચર કાર્ડ્સ - બ્લેકમેજિક ડિઝાઇન, આંતરિક કીઇંગ સ્કીમ અનુસાર કામ કરે છે - આ ત્યારે થાય છે જ્યારે કેમેરામાંથી વિડિઓ ફ્રેમ તમારી પાસે આવે છે. કાર્ડની પોતાની પ્રોસેસિંગ ચિપ હોય છે, જ્યાં એક ફ્રેમ પણ નાખવામાં આવે છે, જે આવનારા કાર્ડની ટોચ પર હોવી જોઈએ. કાર્ડ તેમને મિશ્રિત કરે છે - અમે ત્યાં બીજું કંઈપણ સ્પર્શતા નથી અને વિડિઓ કેમેરાની ફ્રેમને અસર કરતા નથી. તેણીએ વિડિયો આઉટપુટ દ્વારા કંટ્રોલ રૂમમાં પરિણામ થૂંક્યું. શીર્ષકો અને અન્ય સમાન વસ્તુઓને ઓવરલે કરવા માટે આ એક સારી પદ્ધતિ છે, પરંતુ તે મિશ્ર વાસ્તવિકતા અસરો માટે ખૂબ જ યોગ્ય નથી કારણ કે રેન્ડર પાઇપલાઇન પર ઘણા નિયંત્રણો છે.

દિમિત્રી: રીઅલ-ટાઇમ કમ્પ્યુટિંગ, ઑબ્જેક્ટ બંધનકર્તા અથવા બીજું કંઈક?

એન્ડ્ર્યુ: ગુણવત્તાના સંદર્ભમાં અને ઇચ્છિત અસરો પ્રાપ્ત કરવા માટે. કારણ કે આપણે જાણતા નથી કે આપણે ચિત્રને ટોચ પર શું મૂકી રહ્યા છીએ. અમે ફક્ત મૂળ પ્રવાહની ટોચ પર રંગ અને પારદર્શિતા માહિતી મોકલીએ છીએ. કેટલીક અસરો જેમ કે રીફ્રેક્શન, સાચી પારદર્શિતા અને વધારાના પડછાયાઓ આ સ્કીમ સાથે પ્રાપ્ત કરી શકાતા નથી. આ કરવા માટે, તમારે બધું એકસાથે રેન્ડર કરવાની જરૂર છે. ઉદાહરણ તરીકે, આગ અથવા ગરમ ડામરથી હવાના વિકૃતિની અસર બનાવવાની કોઈ રીત નથી. રિફ્રેક્ટિવ ઇન્ડેક્સને ધ્યાનમાં લેતા પારદર્શિતા અસરના સ્થાનાંતરણ માટે પણ તે જ છે. અમે શરૂઆતમાં આ પ્રતિબંધોને આધારે સામગ્રી બનાવી અને યોગ્ય અસરોનો ઉપયોગ કરવાનો પ્રયાસ કર્યો.

Instagram પર આ પોસ્ટ જુઓ

મિન્સ્કમાં II યુરોપિયન ગેમ્સનું સમાપન.

દ્વારા શેર કરેલી એક પોસ્ટ એલેના લેન્સકાયા (@alyonalanskaya) જૂન 30, 2019 ના રોજ બપોરે 3:19 PDT પર

દિમિત્રી: શું તમારી પાસે યુરોપિયન ગેમ્સ માટેના પ્રથમ પ્રોજેક્ટમાં તમારી પોતાની સામગ્રી પહેલેથી જ છે?

એન્ડ્ર્યુ: ના, સામગ્રી વિકાસનો મુખ્ય તબક્કો Sechenov.com ના લોકો દ્વારા કરવામાં આવ્યો હતો. તેમના ગ્રાફિક કલાકારોએ એનિમેશન અને અન્ય વસ્તુઓ સાથે મૂળભૂત સામગ્રી દોર્યા. અને અમે બધું એન્જિનમાં એકીકૃત કર્યું, વધારાની અસરો ઉમેરી, તેને અનુકૂલિત કરી જેથી બધું યોગ્ય રીતે કાર્ય કરે.

જો આપણે પાઇપલાઇન વિશે વાત કરીએ, તો પછી ટેલિવિઝન પ્રસારણ માટે અમે અવાસ્તવિક એન્જિન 4 પર બધું જ એસેમ્બલ કર્યું. સંયોગથી, તેઓએ તે જ ક્ષણે મિશ્ર વાસ્તવિકતા માટે તેમના સાધનોને વેગ આપવાનું શરૂ કર્યું. તે બહાર આવ્યું છે કે બધું એટલું સરળ નથી. અત્યારે પણ બધા ઓજારો કાચા છે, અમારે હાથ વડે ઘણું પૂરું કરવાનું હતું. મિન્સ્કમાં અમે એન્જિનના કસ્ટમ બિલ્ડ પર કામ કર્યું, એટલે કે, અમે એન્જિનની અંદર કેટલીક વસ્તુઓ ફરીથી લખી જેથી, ઉદાહરણ તરીકે, અમે વાસ્તવિક વસ્તુઓની ટોચ પર પડછાયાઓ દોરી શકીએ. તે સમયે વર્તમાન એન્જિનના વર્ઝનમાં એવા ફીચર્સ નહોતા કે જે માનક સાધનોનો ઉપયોગ કરીને આને કરવાની મંજૂરી આપે. આ કારણોસર, અમારા લોકોએ અત્યંત જરૂરી હતી તે બધું પ્રદાન કરવા માટે તેમની પોતાની કસ્ટમ એસેમ્બલી બનાવી.

અન્ય ઘોંઘાટ અને કાઝાનમાં વર્લ્ડ સ્કિલ્સમાં અનુકૂલન

ટાઈમકોડ (દ્વારા ઓડિયો આવૃત્તિઓ) — 31:37

દિમિત્રી: પરંતુ આ બધું એકદમ ટૂંકા ગાળામાં?

એન્ડ્ર્યુ: સમયમર્યાદા કડક હતી કાઝાન પ્રોજેક્ટ, મિન્સ્ક અનુસાર - સામાન્ય. વિકાસ માટે લગભગ છ મહિના, પરંતુ હકીકત ધ્યાનમાં લેતા કે છ લોકો સામેલ હતા. તે જ સમયે, અમે મોબાઇલનો ભાગ બનાવી રહ્યા હતા અને ટેલિવિઝન ઉત્પાદન માટે સાધનો વિકસાવી રહ્યા હતા. ત્યાં માત્ર એક ચિત્ર આઉટપુટ ન હતું. ઉદાહરણ તરીકે, ઓપ્ટિક્સ સાથેની ટ્રેકિંગ સિસ્ટમ, આ માટે તમારે તમારા પોતાના ટૂલ્સ બનાવવા પડશે.

દિમિત્રી: શું એક પ્રોજેક્ટમાંથી બીજા પ્રોજેક્ટમાં કોઈ અનુકૂલન હતું? દોઢ મહિનામાં, વિકાસનો લાભ લેવા અને નવી સામગ્રી સાથે પ્રોજેક્ટને નવી સાઇટ પર સ્થાનાંતરિત કરવું જરૂરી હતું?

એન્ડ્ર્યુ: હા, તે દોઢ મહિના માટે હતું. અમે મિન્સ્ક પ્રોજેક્ટ પછી આખી ટીમ માટે બે અઠવાડિયાના વેકેશનનું આયોજન કર્યું હતું. પરંતુ બંધ થયા પછી તરત જ, Sechenov.com ના લોકો આવે છે અને કહે છે: "સારું, ચાલો પછી કાઝાન કરીએ." અમે હજી પણ થોડો આરામ કરવામાં વ્યવસ્થાપિત છીએ, પરંતુ આ પ્રોજેક્ટ પર ખૂબ જ ઝડપથી સ્વિચ કર્યું. અમે કેટલાક ટેકનિકલ કામ પૂર્ણ કર્યા છે. મોટાભાગનો સમય સામગ્રી પર ખર્ચવામાં આવ્યો હતો, કારણ કે વર્લ્ડસ્કિલ માટે અમે તે સંપૂર્ણ રીતે કર્યું હતું, અમે તેને માત્ર પ્રોડક્શન ટીમ સાથે સંકલન કર્યું હતું. તેમના તરફથી માત્ર એક સ્ક્રિપ્ટ હતી. પરંતુ તે સરળ હતું - વધારાના પુનરાવર્તનોની જરૂર નહોતી. જ્યારે તમે જાતે સામગ્રી બનાવો છો, ત્યારે તમે તરત જ જુઓ છો કે તે એન્જિનમાં કેવી રીતે કાર્ય કરે છે, અને તમે ઝડપથી સંપાદિત અને સંકલન કરી શકો છો.

મોબાઇલ ભાગ વિશે, અમે મિન્સ્કમાં અમારી પાસે રહેલી તમામ સૂક્ષ્મતાને ધ્યાનમાં લીધી. અમે નવી એપ્લિકેશન ડિઝાઇન બનાવી, આર્કિટેક્ચરને થોડું ફરીથી ડિઝાઇન કર્યું, ટ્યુટોરિયલ્સ ઉમેર્યા, પરંતુ તેને શક્ય તેટલું ટૂંકું અને સ્પષ્ટ બનાવવાનો પ્રયાસ કર્યો. અમે એપ્લીકેશન લોંચ કરવાથી લઈને સામગ્રી જોવા સુધીના યુઝર સ્ટેપ્સની સંખ્યામાં ઘટાડો કર્યો છે. પર્યાપ્ત પ્રોજેક્ટ પૂર્ણ કરવા માટે દોઢ મહિનો પૂરતો હતો. દોઢ અઠવાડિયામાં અમે સાઈટ પર પહોંચી ગયા. ત્યાં કામ કરવું સહેલું હતું કારણ કે પ્રોજેક્ટ પરનું તમામ નિયંત્રણ આયોજકોના હાથમાં હતું; અન્ય સમિતિઓ સાથે સંકલન કરવાની જરૂર નહોતી. કાઝાનમાં કામ કરવું સરળ અને સરળ હતું અને ત્યાં સમય ઓછો હતો તે એકદમ સામાન્ય હતું.

દિમિત્રી: પરંતુ શું તમે ધ્વનિના આધારે સિંક્રનાઇઝેશનનો અભિગમ છોડી દેવાનું નક્કી કર્યું છે?

એન્ડ્ર્યુ: હા, અમે તેને અવાજ દ્વારા છોડી દીધું. તે સારી રીતે કામ કર્યું. જેમ તેઓ કહે છે, જો તે કામ કરે છે, તો તેને સ્પર્શ કરશો નહીં. અમે ફક્ત ઑડિઓ ટ્રૅકની ગુણવત્તાની ઘોંઘાટને ધ્યાનમાં લીધી. જ્યારે તેઓએ પરિચય કર્યો, ત્યારે શો શરૂ થાય તે પહેલાં લોકો પ્રયાસ કરવા માટે એક તાલીમ એપિસોડ હતો. તે આશ્ચર્યજનક હતું કે જ્યારે સ્ટેડિયમમાં ટ્રેક વગાડવાની ક્ષણે તોફાની તાળીઓ, “લાઇવ” હોય છે, ત્યારે સિસ્ટમ તમને આ ટ્રેક સાથે સારી રીતે સુમેળ કરવાની મંજૂરી આપે છે, પરંતુ જો આ ક્ષણે રેકોર્ડ કરેલી તાળીઓ ટ્રેક સાથે ભળી જાય, તો પછી ટ્રેક હવે પકડાયો નથી. આવી ઘોંઘાટ ધ્યાનમાં લેવામાં આવી હતી, અને અવાજની દ્રષ્ટિએ બધું ખૂબ સારી રીતે સુમેળ કરવામાં આવ્યું હતું.

PS અંકના બીજા ભાગમાં આપણે વૈજ્ઞાનિક ડેટા વિઝ્યુલાઇઝેશન, અન્ય પ્રોજેક્ટ્સમાં પ્રોસેસ મોડેલિંગ, ગેમ ડેવલપમેન્ટ અને માસ્ટર પ્રોગ્રામ વિશે વાત કરીશું "કમ્પ્યુટર રમત વિકાસ ટેકનોલોજી" અમે આગલા લેખમાં એક સાતત્ય પ્રકાશિત કરીશું. તમે અમને અહીં સાંભળી અને સમર્થન આપી શકો છો:

• એપલ પોડકાસ્ટ

• યાન્ડેક્ષ.મ્યુઝિક

• પોડએફએમ

PPS દરમિયાન, Habr ના અંગ્રેજી સંસ્કરણ પર: ITMO યુનિવર્સિટી પર નજીકથી નજર.

સોર્સ: www.habr.com