Një grup hulumtuesish nga Universiteti i Tel Avivit zbuloi tekstet origjinale të lidhura me sistemin e mësimit të makinave MDM (Motion Diffusion Model), i cili lejon të gjenerohen lëvizje realiste të njeriut. Kodi është i shkruar në gjuhën Python duke përdorur kornizën PyTorch dhe shpërndahet nën licencën MIT. Për të kryer eksperimente mund të përdoren si modelet e gatshme, ashtu edhe të realizohet trajnimi i modeleve nga vetë, duke përdorur skriptet e ofruara, për shembull, duke përdorur koleksionin e imazheve 3D të njeriut HumanML3D. Një GPU me mbështetje për CUDA është e nevojshme për trajnimin e sistemit.
Përdorimi i mundësive tradicionale për të animuar lëvizjet e njeriut është i vështirë për shkak të ndërlikimeve që lidhen me diversitetin e madh të lëvizjeve të mundshme dhe vështirësinë e përshkrimit të tyre formal, si dhe për shkak të ndjeshmërisë së madhe të perceptimit të njeriut ndaj lëvizjeve jo natyrale. Përpjekjet e mëparshme për të përdorur modelet gjeneruese të mësimit të makinave kishin probleme me cilësinë dhe shprehshmërinë e kufizuar.
Në sistemin e propozuar është bërë një përpjekje për të përdorur modelet e difuzionit për të gjeneruar lëvizjet, të cilat janë natyrisht më të përshtatshme për simulimin e lëvizjeve të njeriut, por nuk janë pa disavantazhe, si kërkesat e larta për burime kompjuterike dhe vështirësitë në menaxhim. Për të minimizuar disavantazhet e modeleve të difuzionit, MDM angazhon një rrjet nervor me arkitekturën
PĂ«r tĂ« kontrolluar gjenerimin, Ă«shtĂ« parashikuar mundĂ«sia e pĂ«rdorimit tĂ« njĂ« pĂ«rshkrimi tekstual tĂ« veprimit nĂ« njĂ« gjuhĂ« natyrore (pĂ«r shembull, ânjĂ« njeri po ecĂ«n pĂ«rpara dhe po pĂ«rkulemi pĂ«r tĂ« ngritur diçka nga tokaâ) ose tĂ« pĂ«rdoren veprime standarde si âvrapimâ dhe âshkaktimâ. Sistemi gjithashtu mund tĂ« pĂ«rdoret pĂ«r tĂ« redaktuar lĂ«vizjet dhe pĂ«r tĂ« plotĂ«suar detajet qĂ« mungojnĂ«. Hulumtuesit kryen testime, ku pjesĂ«marrĂ«sve iu kĂ«rkua tĂ« zgjidhnin nga disa mundĂ«si rezultatin mĂ« tĂ« mirĂ« â nĂ« 42% tĂ« rasteve, njerĂ«zit preferuan lĂ«vizjet e sintetizuara pĂ«rpara atyre reale.
Burimi: opennet.ru
