E Team vu Fuerscher vun der Tel Aviv Universitéit huet de Quellcode opgemaach, deen mam MDM (Motion Diffusion Model) Maschinn Léiersystem assoziéiert ass, wat et erlaabt realistesch mënschlech Bewegungen ze generéieren. De Code gëtt am Python mam PyTorch Kader geschriwwe a gëtt ënner der MIT Lizenz verdeelt. Fir Experimenter ze maachen, kënnt Dir souwuel fäerdeg Modeller benotzen an d'Modeller selwer trainéieren mat de proposéierte Skripte, zum Beispill mat der HumanML3D Sammlung vun dreidimensionalen mënschleche Biller. Fir de System ze trainéieren, ass eng GPU mat CUDA Support erfuerderlech.
D'Benotzung vun traditionelle Fäegkeeten fir mënschlech Bewegungen ze animéieren ass schwéier wéinst de Komplikatioune verbonne mat der grousser Villfalt vu méigleche Beweegungen an der Schwieregkeet fir se formell ze beschreiwen, souwéi déi grouss Empfindlechkeet vun der mënschlecher Perceptioun fir onnatierlech Beweegungen. Virdrun Versuch generativ Maschinn Léieren Modeller ze benotzen hu Problemer mat Qualitéit a limitéiert Expressivitéit haten.
De proposéierte System probéiert Diffusiounsmodeller ze benotzen fir Beweegungen ze generéieren, déi natierlech besser gëeegent sinn fir mënschlech Bewegungen ze simuléieren, awer net ouni Nodeeler sinn, sou wéi héich computational Ufuerderungen a Kontrollkomplexitéit. Fir d'Mängel vun Diffusiounsmodeller ze minimiséieren, benotzt MDM en Transformator neuralt Netzwierk a Probeprediktioun amplaz vu Geräischerprognose op all Etapp, wat et méi einfach mécht Anomalien wéi Verloscht vum Uewerflächekontakt mam Fouss ze vermeiden.
Fir d'Generatioun ze kontrolléieren ass et méiglech eng Textbeschreiwung vun enger Handlung an der natierlecher Sprooch ze benotzen (zum Beispill "eng Persoun geet no vir a biegt sech fir eppes vum Buedem opzehuelen") oder benotzt Standardaktiounen wéi "Lafen" an " sprangen." De System kann och benotzt ginn fir Bewegungen z'änneren an verluer Detailer auszefëllen. D'Fuerscher hunn en Test gemaach, an deem d'Participanten opgefuerdert goufen e bessert Resultat aus verschiddene Méiglechkeeten ze wielen - an 42% vun de Fäll hunn d'Leit synthetiséiert Beweegunge léiwer iwwer real.
Source: opennet.ru
