Як гурӯҳи муҳаққиқони Донишгоҳи Тел-Авив рамзи сарчашмаеро, ки бо системаи омӯзиши мошини MDM (Motion Diffusion Model) алоқаманд аст, кушоданд, ки имкон медиҳад ҳаракатҳои воқеии инсонро тавлид кунад. Рамз дар Python бо истифода аз чаҳорчӯбаи PyTorch навишта шудааст ва таҳти иҷозатномаи MIT паҳн карда мешавад. Барои гузаронидани таҷрибаҳо, шумо метавонед ҳам моделҳои тайёрро истифода баред ва ҳам бо истифода аз скриптҳои пешниҳодшуда моделҳоро худатон омӯзед, масалан, бо истифода аз коллексияи HumanML3D тасвирҳои се андозагирии инсон. Барои омӯзиши система, GPU бо дастгирии CUDA лозим аст.
Истифодаи қобилиятҳои анъанавӣ барои аниматсия кардани ҳаракатҳои инсон аз сабаби мушкилоте, ки бо гуногунии зиёди ҳаракатҳои имконпазир ва душвории тавсифи расман онҳо алоқаманданд, инчунин ҳассосияти бузурги дарки инсон ба ҳаракатҳои ғайритабиӣ душвор аст. Кӯшишҳои қаблии истифодаи моделҳои генеративии омӯзиши мошинҳо бо сифат ва ифодаи маҳдуд мушкилот доштанд.
Системаи пешниҳодшуда кӯшиш мекунад, ки моделҳои диффузияро барои тавлиди ҳаракатҳо истифода барад, ки табиатан барои тақлид кардани ҳаракатҳои инсон беҳтар мувофиқанд, аммо аз нуқсонҳо, аз қабили талаботи баланди ҳисоббарорӣ ва мураккабии назорат нестанд. Барои кам кардани камбудиҳои моделҳои диффузия, MDM ба ҷои пешгӯии садо дар ҳар як марҳила шабакаи нейронии трансформаторӣ ва пешгӯии намунаро истифода мебарад, ки пешгирии аномалияҳо ба монанди аз даст додани тамоси рӯи пойро осон мекунад.
Барои назорат кардани насл мумкин аст тавсифи матнии амалро бо забони табиӣ истифода бурд (масалан, "одам ба пеш қадам мезанад ва хам мешавад, то чизеро аз замин бигирад") ё амалҳои стандартиро ба мисли "давидан" ва " ҷаҳидан». Система инчунин метавонад барои таҳрир кардани ҳаракатҳо ва пур кардани ҷузъиёти гумшуда истифода шавад. Муҳаққиқон озмоише анҷом доданд, ки дар он аз иштирокчиён хоҳиш карда шуд, ки натиҷаи беҳтарро аз якчанд вариант интихоб кунанд - дар 42% ҳолатҳо одамон ҳаракатҳои синтезшударо аз ҳаракатҳои воқеӣ бартарӣ доданд.
Манбаъ: opennet.ru