Използване на машинно обучение за откриване на емоции и контрол на изражението на лицето ви

Андрей Савченко от филиала на Висшето училище по икономика в Нижни Новгород публикува резултатите от своите изследвания в областта на машинното обучение, свързани с разпознаването на емоции по лицата на хора, присъстващи на снимки и видеоклипове. Кодът е написан на Python с помощта на PyTorch и е лицензиран под лиценза Apache 2.0. Предлагат се няколко готови модела, включително такива, подходящи за използване на мобилни устройства.

Въз основа на библиотеката друг разработчик създаде програмата sevimon, която ви позволява да проследявате промените в емоциите с помощта на видеокамера и да помогнете за контролиране на напрежението на лицевите мускули, например за премахване на пренапрежението, косвено повлияване на настроението и, при продължителна употреба, предотвратява появата на мимически бръчки. Библиотеката CenterFace се използва за определяне на позицията на лице във видеоклип. Кодът на sevimon е написан на Python и е лицензиран под AGPLv3. При първото стартиране се зареждат моделите, след което програмата не изисква интернет връзка и работи напълно автономно. Подготвени са инструкции за стартиране на Linux/UNIX и Windows, както и докер изображение за Linux.

Sevimon работи по следния начин: първо се идентифицира лице в изображение от камера, след това лицето се сравнява с всяка от осем емоции (гняв, презрение, отвращение, страх, радост, липса на емоции, тъга, изненада), след което определено оценка за сходство се дава за всяка емоция. Получените стойности се съхраняват в лог в текстов формат за последващ анализ от програмата sevistat. За всяка емоция във файла с настройки можете да зададете горна и долна граница на стойностите, когато се пресичат, незабавно се издава напомняне.

Източник: opennet.ru