Andi Savchenko nga filiali në Nizhny Novgorod i Shkollës Suprem të Ekonomisë publikoi rezultatin e kërkimeve të tij në fushën e mësimit makinerik, që lidhen me njohjen e emocioneve në fytyrat e njerëzve, të pranishëm në fotografi dhe video. Kodi është shkruar në gjuhën Python duke përdorur PyTorch dhe shpërndahet nën licencën Apache 2.0. Janë në dispozicion disa modele të gatshme, përfshirë ato të përshtatshme për përdorim në pajisje celulare.
Në bazë të bibliotekës, një zhvillues tjetër krijoi programin sevimon, që lejon ndjekjen e ndryshimeve të emocioneve duke përdorur kamerën dhe ndihmon në kontrollin e tensionit të muskujve të fytyrës, për shembull, për të eliminimin e mbingarkesës, ndikimin e tërthortë në humor dhe, me përdorimin e zgjatur, parandalimin e shfaqjes së rrudhave mimike. Për të përcaktuar pozitat e fytyrës në video, është përdorur biblioteka CenterFace. Kodi i sevimon është shkruar në Python dhe shpërndahet nën licencën AGPLv3. Në nisjen e parë, modelet shkarkohen, pas së cilës programi nuk kërkon lidhje me internetin dhe funksionon plotësisht autonom. Janë përgatitur udhëzime për nisjen në Linux/UNIX dhe Windows, si dhe një imazh docker për Linux.
Sevimon funksionon si më poshtë: së pari, në imazhin e kamerës identifikohet fytyra, pastaj fytyra përputhet me secilën nga tetë emocione (nervozizëm, përbuzje, neveri, frikë, gëzim, mungesë emocionesh, trishtim, befasi), pas së cilës për secilën emocion jepet një shkallë ngjashmërie. Vlerat e marra ruhen në një regjistër në format tekstual për analizën e mëvonshme nga programi sevistat. Për secilën emocion në skedarin e konfigurimit mund të përcaktohen kufijtë e sipërm dhe të poshtëm të vlerave, kur kalohen, menjëherë jepet një kujtesë.
Burimi: opennet.ru
