Andrei Savchenko do escritório da Escola Superior de Economia de Nizhny Novgorod publicou os resultados de suas pesquisas na área de aprendizado de máquina relacionadas ao reconhecimento de emoções nas faces das pessoas presentes em fotos e vídeos. O código está escrito em Python usando PyTorch e é distribuído sob a licença Apache 2.0. Estão disponíveis vários modelos prontos, incluindo aqueles adequados para uso em dispositivos móveis.
Com base na biblioteca, outro desenvolvedor criou o programa sevimon, que permite monitorar a mudança de emoções usando uma câmera de vídeo e ajuda a controlar a tensão dos músculos faciais, por exemplo, para aliviar a sobrecarga, influenciar indiretamente o humor e, com o uso prolongado, prevenir o surgimento de rugas de expressão. Para determinar a posição do rosto no vídeo, é utilizada a biblioteca CenterFace. O código do sevimon é escrito em Python e é distribuído sob a licença AGPLv3. Na primeira execução, os modelos são carregados e, após isso, o programa não requer conexão com a internet e funciona de forma completamente autônoma. Instruções foram preparadas para execução em Linux/UNIX e Windows, assim como uma imagem Docker para Linux.
O sevimon funciona da seguinte maneira: primeiro, um rosto é detectado na imagem da câmera, em seguida, o rosto é comparado a cada uma das oito emoções (raiva, desprezo, nojo, medo, alegria, ausência de emoções, tristeza, surpresa), após o que é dada uma certa pontuação de similaridade para cada emoção. Os valores obtidos são salvos em um registro em formato de texto para análise posterior pelo programa sevistat. Para cada emoção, no arquivo de configurações, é possível definir limites superior e inferior de valores, cuja interseção gera imediatamente um lembrete.
Fonte: opennet.ru
