Podcast "ITMO Research_": me pehea te whakatata ki te tukutahi o nga ihirangi AR me te whakaaturanga i runga i te tauine o te whare tapere katoa

Koinei te wahanga tuatahi o te tuhinga o te uiui tuarua mo ta matou kaupapa (Apple Podcasts, Yandex.Waiata). Putanga Manuhiri - Andrey Karsakov (kapc3d), Ph.D., kairangahau matua i te National Center for Cognitive Research, ahorangi tuarua i te Faculty of Digital Transformations.

Mai i te tau 2012, kei te mahi a Andrey i te roopu rangahau Visualization and Computer Graphics. Ka whai waahi ki nga kaupapa tono nui i te taumata whenua me te ao. I tenei wahanga o te korerorero, ka korero matou mo tana wheako ki te tautoko AR mo nga huihuinga a te iwi.

Podcast "ITMO Research_": me pehea te whakatata ki te tukutahi o nga ihirangi AR me te whakaaturanga i runga i te tauine o te whare tapere katoa
Photography ThisisEngineering RAEng (Unsplash.com)

Te horopaki kaupapa me nga whaainga

Waehere Waehere (na putanga ororongo) — 00:41

dmitrykabanov: E hiahia ana ahau ki te timata me te kaupapa Taakaro Pakeha. He maha nga waahanga, he maha nga roopu i whai waahi ki te whakarite, me te whakarato i te pono mo te mano tini i te wa o te huihuinga i te whare tapere he mahi tino taumaha. I runga i to whai waahi, ko te rorohiko te tuatahi?

kapc3d: Ae, i mahia e matou te waahanga hotaka me te tautoko i te wa o te whakaaturanga. He mea tika ki te whai, te aro turuki me te whakarewa i nga mea katoa i te waa tuuturu, me te mahi tahi me te roopu pouaka whakaata. Mena ka whakaarohia tenei kaupapa mo te katoa, katahi ka taea te korero mo te whakatuwhera me te kati Taakaro Pakeha i Minsk, me te korero mo te whakatuwheratanga o te whakataetae toa Pūkenga Ao i Kazan. He rite tonu te kaupapa mahi, engari he rereke nga huihuinga. E rua marama i waenganui i a raua. I whakareri matou i te kaupapa me nga taangata o te kamupene Sechenov.com.

I tutaki matou ki a ratou i runga i te tupono noa Hui Pūtaiao, i puta i te ngahuru o 2018. I whakaatu nga tauira o to tatou rangatira i ta raatau kaupapa akoranga mo te kaupapa VR. I haere mai nga tama ki a matou ka patai he aha ta matou mahi i roto i ta matou taiwhanga. He penei te ahua:

— Ka mahi tahi koe me te VR, engari ka taea e koe te mahi me te mooni piki ake?

- Well, ahua o, ae.

- He mahi pera, me nga kupu whakataki. Ka taea e koe te mahi?

I karawarawahia e ratou o ratou keha, kaore he mea pono:

- Me ngana ki te ako i nga mea katoa i te tuatahi, katahi ka kimi he otinga.

Dmitriy: He tautoko pāpāho anake ta raatau?

Anaru: Ka hanga e ratou he puranga katoa. Mai i te tirohanga o te whakahaere me te whakahaere, he tino whai waahi ratou ki te whakahaere, ki te whakaari, ki te kowhiringa o nga tirohanga, ki nga waahanga me etahi atu tautoko hangarau. Engari i hiahia ratou ki te mahi i tetahi mea motuhake mo nga whakataetae Pakeha. Ko enei paanga motuhake, penei i te mooni whakauru, kua mahia mo te pouaka whakaata mo te wa roa, engari ehara i te mea tino pai ki te putea mo te whakatinanatanga hangarau. Na reira, i rapu nga taangata mo etahi atu whiringa.

Dmitriy: Kia matapakihia te raruraru i roto i nga korero taipitopito. He aha te mea i roto?

Anaru: He huihuinga. He haora me te hawhe te roa. Me whakarite kia noho ora te hunga e matakitaki ana me te hunga e noho ana i roto i te whare tapere ka kite i nga hua mooni kua whakanuia i roto i te tukutahitanga ki te whakaaturanga ora i runga i te waa me te waahi i runga i te waahi.

He maha nga here hangarau. Kaore e taea te mahi tukutahi wa ma te Ipurangi, na te mea he mataku kei te nui te utaina i runga i te whatunga me nga tuunga katoa me te tumanako o nga upoko o te kawanatanga e haere mai ana ki te huihuinga, ka taea te tarai i nga whatunga waea.

Andrey Karsakov, whakaahua mai he rauemi mai i te Whare Wananga o ITMO
Podcast "ITMO Research_": me pehea te whakatata ki te tukutahi o nga ihirangi AR me te whakaaturanga i runga i te tauine o te whare tapere katoaE rua nga waahanga matua o tenei kaupapa - ko te wheako whaiaro ka taea e te tangata ma roto i nga taputapu waea, me nga mea ka uru ki roto i te pouaka whakaata me nga mata korero i roto i te whare tapere.

Ki te ohorere kei te maataki te tangata i nga wahanga o te mooni whakanui ake ma te taputapu pūkoro me te wa ano ka eke ki runga i te mata, me kite ia i te pikitia ano.

I hiahiatia e maatau nga punaha rereke e rua kia tino tukutahi i te waa. Engari ko te ahuatanga o enei whakaaturanga he huihuinga uaua enei e uru ana te maha o nga ratonga hangarau me nga mahi katoa e rite ana ki nga tohu wa. Ko te Waehere Wa he wa motuhake i te wa e timata ai tetahi mea: te marama, te oro, te tangata e wehe ana, te whakatuwheratanga o nga puapua atamira, me era atu. Me urutau matou ki tenei punaha kia timata nga mea katoa i te wa tika. Ko tetahi atu ahuatanga ko nga whakaaturanga me nga waahanga me te mooni whakanui ake he hononga-tuhi.

Dmitriy: Engari i whakatau koe ki te whakarere i te whakamahi i nga tohu wa na te nui o te tupono o te kaha majeure, i te tuatahi ranei i tatauhia e koe etahi ahuatanga o te mana me te mohio ka nui te taumaha o te punaha katoa?

Anaru: Mena ka mahia e koe he ratonga tukutahi mo taua hunga whakarongo, na ehara i te mea tino uaua. Ahakoa he aha, kare nga tono e ngaro i te po. Ae, he nui te kawenga, engari ehara i te mea ohorere. Ko te patai he pai te whakapau rauemi me te wa mo tenei mena ka puta ohorere te whatunga. Kaore matou i tino mohio ka kore tenei e puta. I te mutunga, i mahi nga mea katoa, me nga aukati na te kawenga, engari i mahi, a ka tukutahi matou i runga i te tohu wa e ai ki tetahi kaupapa rereke. Koinei tetahi o nga wero o te ao.

Nga uaua o te whakatinanatanga mai i te tirohanga UX

Waehere Waehere (na putanga ororongo) — 10:42

Anaru: Me whai whakaaro ano matou ko te whare tapere ehara i te waahi konohete matarohia, me te tukutahi i nga punaha puta noa i te waahi mo nga taputapu pūkoro. Na, i etahi wa kua pahure ake nei ka huri haere ahau korero mooni whakanuia i nga konohete Eminem, katahi ka puta he keehi ki a Loboda.

Photography Robert Kia ora (Unsplash.com)
Podcast "ITMO Research_": me pehea te whakatata ki te tukutahi o nga ihirangi AR me te whakaaturanga i runga i te tauine o te whare tapere katoaEngari he wheako tonu tenei kei mua i a koe - ka tu te mano katoa ki mua i te atamira, he ngawari noa te tukutahi. Mo te whare tapere, me mohio koe ko tehea taha o te porowhita kei runga koe, te tuunga whanaunga, kia uru te whare tapere ki te waahi kei roto i te taiao mariko. He wero kawa. I ngana ratou ki te whakaoti i nga huarahi rereke, a ko te hua he keehi tata ki nga mea i whakatinanahia e Loboda, engari kaore i nga waahanga katoa.

Ka waiho ma te kaiwhakamahi e whakatau kei hea ia. I mahia e matou he tohu mo te whare tapere, i kowhiria e te tangata he wahanga, he rarangi, he waahi. Ko enei katoa i roto i nga "pawhiri" e wha. I muri mai me whakatau i te huarahi ki te atamira. Ki te mahi i tenei, i whakaatuhia e matou he ahua o te ahua o te waahi mai i te tirohanga ritenga. Ka whakakotahihia e ia, ka paopao, ka mutu - ka noho te atamira. I ngana matou ki te whakangawari ake i tenei mahi ka taea. Heoi ano, ko te 90% o nga kaimakitaki e pirangi ana ki te maataki i te whakaaturanga ehara i te hunga kua mohio ki te whakawhitiwhiti korero me te mea pono.

Dmitriy: He tono motuhake mo tenei kaupapa?

Anaru: Ae, he tono mo iOS me Android, i panaia e matou ki te toa. He kaupapa whakatairanga motuhake mo taua kaupapa. I korerohia i mua me pehea te tango me etahi atu.

Dmitriy: Me mohio koe kaore he waahi mo te tangata ki te whakamatautau tinana me te ako ki te whakamahi i taua tono. Na reira, ko te mahi "whakaako" i te hunga whakarongo ka tino uaua.

Anaru: Ae Ae. Ma te UX, he maha nga pupuhi i mauhia e matou, no te mea e hiahia ana te kaiwhakamahi ki te tiki i te wheako i roto i nga patene e toru: kua tikiakehia, kua whakauruhia, kua whakarewahia - kua mahi. He maha nga tangata he mangere ki te whai i nga akoranga uaua, te panui i nga akoranga, me era atu. A kaore matou i ngana ki te whakamarama i nga mea katoa ki te kaiwhakamahi i te mea ka taea i roto i te akoranga: ka tuwhera he matapihi ki konei, ka uru ki te kamera i konei, ki te kore e mahi, me etahi atu. Ahakoa te maha o nga whakamaarama ka tuhia e koe, ahakoa te kiko o te ngaungau, ahakoa he aha nga gif ka whakauruhia e koe, kaore e panuihia e te tangata.

I Minsk i kohia e matou he puna nui o nga urupare mo tenei waahanga, a kua rereke kee mo te tono i Kazan. I whakauruhia e matou ki reira ehara i te mea ko nga tohu oro me nga tohu wa e rite ana ki tetahi waahanga o te mooni whakanui ake, engari i tangohia katoatia e matou nga phonograms me nga tohu wa katoa. Na ka rongo te tono i nga mea e tupu ana i te wa o te whakarewatanga, a - mena kua uru mai tetahi tangata i te wa he - ka tukuna e ia nga korero: "E hoa, ka pouri ahau, ka tae to wahanga AR i roto i te 15 meneti."

He iti mo te hoahoanga me te huarahi ki te tukutahi

Waehere Waehere (na putanga ororongo) — 16:37

Dmitriy: I whakatau koe ki te tukutahi ma te oro?

Anaru: Ae, i puta ohorere mai. I tirotirohia e matou nga whiringa ka tae atu ki tetahi kamupene Cifrasoft mai i Izhevsk. Ka hangaia e ratou he SDK kaore i te tino maamaa, engari he rino-mahi, ka taea e koe te tukutahi i te oro me te waa. I whakatauhia te punaha ki te mahi me te pouaka whakaata, ka taea e koe te whakaatu i tetahi mea i roto i tetahi tono e pa ana ki te tangi o te panui herenga, ka hoatu ranei he wheako tauwhitiwhiti i runga i te ara kiriata.

Dmitriy: Engari he mea kotahi - kei te noho koe i roto i to ruuma noho, me tetahi atu mea - he whare tapere me nga mano tangata. I pehea te mahi mo koe me te kounga o te rekoata oro me tona mohiotanga o muri mai?

Anaru: He nui nga mataku me nga feaa, engari i te nuinga o nga wa i mohio pai nga mea katoa. Ka hangaia e ratou nga hainatanga ki runga i te riu oro me o raatau algorithm mohio - he iti ake te taumaha o te hua i te konae oro taketake. Ina whakarongo te hopuoro ki te oro huri noa, ka ngana ki te kimi i enei ahuatanga me te mohio ki te riu i runga i a raatau. I nga ahuatanga pai, ko te tika o te tukutahi he 0,1-0,2 hēkona. He nui noa atu tenei. I roto i nga ahuatanga kino ka eke ki te 0,5 hēkona te rereketanga.

He nui te whakawhirinaki ki te taputapu. I mahi tahi matou me te tini o nga taputapu. Mo nga iPhones he 10 noa nga tauira. He pai ta ratou mahi i runga i te kounga me etahi atu ahuatanga. Engari me nga phi he rite te kararehe ki taku whaea. Kaore i nga waahi katoa ka puta mai i mahi te tukutahi oro. I etahi wa kaore e taea te rongo i nga riipene rereke i runga i nga taputapu rereke na etahi ahuatanga. I tetahi waahi ka ngaro nga iarere iti, i tetahi waahi ka timata nga waa teitei ki te wiri. Engari ki te mea he kaiwhakatikatika te taputapu i runga i te hopuoro, ka mahi tonu te tukutahi.

Dmitriy: Tena koa korero mai mo te hoahoanga - he aha i whakamahia i roto i te kaupapa?

Anaru: I hanga e matou te tono i roto i te Unity - ko te waahanga ngawari rawa atu mo te maha-turanga me te mahi me nga whakairoiro. Kua whakamahia te AR Foundation. I kii tonu matou kaore matou i te hiahia ki te whakararu i te punaha, na reira i whakawhäitihia e mätou ki te huinga taputapu e tautoko ana i a ARKit me ARCore kia whai wa ki te whakamatautau i nga mea katoa. I hanga e matou he mono mo te DigitalSoft SDK, he kei runga i ta maatau GitHub. I hangaia e matou he punaha whakahaere ihirangi kia rere ai nga tuhinga i runga i te rarangi waahi.

He iti nei ta matou korero ki te punaha matūriki, na te mea ka taea e te kaiwhakamahi te uru mai i nga wa katoa i roto i tetahi waahanga, a ka hiahia matou kia kite ia i nga mea katoa mai i te wa i tukutahi ai ia. I whiria e matou he punaha e taea ai te purei i nga ahuatanga i roto i te waa, kia taea ai te panuku o te wheako XNUMXD ki muri, ki muri, penei i te kiriata. Ahakoa e mahi ana i waho o te pouaka me nga pakiwaituhi matarohia, me mahi maatau ki nga punaha matūriki. I etahi wa, ka timata ratou ki te pupuhi, a, ki te kitea koe i tetahi waahi i mua i te waahi o te tipu, kaore ano kia whanau, ahakoa te ahua o te mea kua tika. Engari he tino ngawari tenei raruraru ki te whakaoti.

Mo te waahanga pūkoro, he tino ngawari te hoahoanga. Mo te panui pouaka whakaata he uaua ake nga mea katoa. I herea maatau taputapu. Ka whakatauhia e te kaihoko tetahi tikanga: "Kei konei kei a maatau te papa taputapu pera, me te korero, me mahi nga mea katoa." I aro tonu matou ki te mahi me nga kaari hopu ataata putea. Engari ehara i te mea he kino te putea.

He herenga mo nga taputapu, mo nga kaari hopu ataata me nga tikanga mahi - me pehea te tango pikitia. Ko nga kaari hopu - Blackmagic Hoahoa, i mahi i runga i te kaupapa matua o roto - koinei te wa ka tae mai he anga ataata ki a koe mai i te kamera. Kei te kaari tana ake maramara tukatuka, kei reira ano he anga ka whakauruhia, me whakakikoruatia ki runga ake o te mea e haere mai ana. Ka whakaranuhia e te kaari - kaore matou e pa ki tetahi atu mea i reira kaore hoki e pa ki te anga mai i te kamera ataata. Ka tuwhahia e ia te hua ki te ruma whakahaere ma te whakaputanga ataata. He tikanga pai tenei mo te whakakikorua i nga taitara me etahi atu mea rite, engari kaore e tino pai mo nga paanga mooni whakauru na te mea he maha nga here mo te paipa tuku.

Dmitriy: I runga i nga tikanga mo te rorohiko-a-waa, te here taonga, tetahi atu mea ranei?

Anaru: Mo te kounga me te whakatutuki i nga paanga e hiahiatia ana. No te mea kaore matou e mohio he aha ta matou e whakatakoto ana i te pikitia ki runga ake. Ka tukuna noa e matou nga korero tae me te maarama ki runga o te awa taketake. Ko etahi o nga paanga penei i te hurihanga, te marama tika, me etahi atu atarangi kaore e taea te whakatutuki ma tenei kaupapa. Ki te mahi i tenei, me mahi koe i nga mea katoa. Hei tauira, karekau he huarahi hei hanga i te paheketanga o te hau mai i te ahi, i te uku wera ranei. He pera ano mo te whakawhitinga o te paanga maramatanga me te whai whakaaro ki te tohu tohu. I te tuatahi i hanga e matou nga ihirangi i runga i enei here me te ngana ki te whakamahi i nga paanga tika.

Tirohia tenei pou i Instagram

Te kati o nga whakataetae Pakeha II i Minsk.

He pou i tuhia e Alena Lanskaya (@alyonalanskaya) i te Hune 30, 2019 i te 3:19pm PDT

Dmitriy: Kei a koe ano nga korero i roto i te kaupapa tuatahi mo nga whakataetae Pakeha?

Anaru: Kaore, ko te waahanga matua o te whakawhanaketanga ihirangi i mahia e nga taangata mai i Sechenov.com. Na o ratou kaitoi whakairoiro i tuhi i nga kaupapa taketake me nga pakiwaituhi me etahi atu mea. Na ka whakauruhia e matou nga mea katoa ki roto i te miihini, ka taapirihia etahi atu paanga, ka urutau kia pai te mahi o nga mea katoa.

Mena ka korero tatou mo te paipa, na mo te panui pouaka whakaata i whakaemihia e matou nga mea katoa i runga i te Unreal Engine 4. I te tupono noa, i taua wa ka timata ratou ki te whakanui i a raatau taputapu mo te mooni whakauru. I puta mai ko nga mea katoa ehara i te mea ngawari. Inaianei he mata noa nga taputapu katoa; he maha nga mea i oti ma te ringaringa. I Minsk i mahi matou i te hanga ritenga o te miihini, ara, i tuhia ano e matou etahi mea i roto i te miihini, hei tauira, ka taea e matou te tuhi atarangi ki runga ake o nga taonga tuuturu. Ko te putanga o te miihini o naianei i tera wa kaore he ahuatanga ka taea te mahi ma te whakamahi i nga taputapu paerewa. Mo konei, i hanga e a maatau taangata ta raatau ake huihuinga hei whakarato i nga mea katoa e tika ana.

Ko etahi atu ahuatanga me te urutau ki te WorldSkills i Kazan

Waehere Waehere (na putanga ororongo) — 31:37

Dmitriy: Engari enei katoa i roto i te wa poto?

Anaru: I piri tonu nga ra kati kaupapa Kazan, e ai ki a Minsk - noa. Tata ki te ono marama mo te whakawhanaketanga, engari me te whakaaro e ono nga tangata i uru. I te wa ano, kei te mahi matou i te waahanga pūkoro me te whakawhanake taputapu mo te hanga pouaka whakaata. Ehara i te mea he putanga pikitia anake. Hei tauira, he punaha aroturuki me nga optics, mo tenei me hanga e koe au ake taputapu.

Dmitriy: I whai urutaunga mai i tetahi kaupapa ki tetahi atu? I roto i te marama me te hawhe, he mea tika ki te whakamahi i nga whanaketanga me te whakawhiti i te kaupapa me nga mea hou ki tetahi waahi hou?

Anaru: Ae, mo te marama me te hawhe. I whakaritea e matou he hararei mo te rua wiki mo te roopu katoa i muri i te kaupapa Minsk. Engari i muri tonu i te kati, ka haere mai nga taangata mai i Sechenov.com ka kii: "Na, me mahi Kazan." I kaha tonu matou ki te okioki, engari i tere te huri ki tenei kaupapa. I oti i a maatau etahi mahi hangarau. Ko te nuinga o te waa i pau ki runga i nga kaupapa, na te mea mo te WorldSkills i mahia katoatia e matou, i ruruku noa matou me te roopu whakaputa. He tuhinga noa i a raatau. Engari he maamaa ake - kaore he take mo etahi atu whitiwhitinga. Ka waihangahia e koe nga ihirangi, ka kite tonu koe me pehea te mahi i roto i te miihini, ka taea e koe te whakatika tere me te whakarite.


Mo te waahanga pūkoro, i whakaarohia e matou nga mahi mohio katoa i a matou i Minsk. I hanga e matou he hoahoa tono hou, he iti nei te hoahoanga, he taapiri i nga akoranga, engari i ngana kia poto, kia maamaa hoki. I whakaitihia e matou te maha o nga taahiraa kaiwhakamahi mai i te whakarewatanga o te tono ki te tiro i nga ihirangi. Kotahi marama me te haurua i nui ki te whakaoti i tetahi kaupapa tika. I roto i te wiki me te hawhe ka tae matou ki te waahi. He ngawari ake te mahi ki reira na te mea kei te ringa o nga kaiwhakahaere nga mana whakahaere katoa o te kaupapa, kaore he take ki te mahi tahi me etahi atu komiti. He maamaa ake, he maamaa ake te mahi i Kazan, he mea noa te iti o te waa.

Dmitriy: Engari i whakatau koe ki te waiho i te huarahi ki te tukutahitanga, i runga i te oro?

Anaru: Ae, i waiho ma te tangi. I pai te mahi. E ai ki a ratou, ki te pai, kaua e pa atu. I whakaaro noa matou ki nga ahuatanga o te kounga o te riu oro. I a ratou i mahi i te whakataki, he wahanga whakangungu ma nga tangata hei whakamatautau i mua i te tiimata o te whakaaturanga. He mea whakamiharo i te wa o te purei i te ara i roto i te whare tapere he pakipaki awha, "ora", ka taea e te punaha te tukutahi pai ki tenei ara, engari mena i tenei wa ka konatunatua te pakipaki ki te ara, katahi ka kua kore te ara e mau. I whakaarohia nga ahuatanga penei, a he pai te tukutahi o nga mea katoa mo te oro.

PS I te waahanga tuarua o te take e korero ana matou mo te whakaata i nga raraunga putaiao, te whakatauira tukanga i etahi atu kaupapa, te whanaketanga keemu me te kaupapa a te rangatira "Hangarau whanaketanga kēmu rorohiko" Ka whakaputahia e matou he korero i roto i te tuhinga ka whai ake. Ka taea e koe te whakarongo me te tautoko i a matou i konei:

PPS I tenei wa, mo te putanga Ingarihi o Habr: he tirohanga ake ki te Whare Wananga o ITMO.

Source: will.com

Tāpiri i te kōrero