FaceScope (актуальный)

О проекте

FaceScope — это сервис, сочетающий технологии компьютерного зрения, прикладную психологию и программирование.

Разрабатываемое приложение с помощью специализированных библиотек на С++ (OpenCV) с фронтендом на Lua и LOVE2D и сервером на Python. Приложение позволяет распознавать положение ключевых точек на лице и их отношение к соседним точкам, что и трактуется человеком как проявление эмоций на лице.

7+2

основные эмоции и детализация положительных

«полей» для распознавания мышечного тонуса

60+

3 секунды

время работы в режиме
реального времени

Практическая значимость

Обучение психологов и психотерапевтов для практики распознавания эмоций.

Психология

Совершенствование своих мимических и эмоциональных выражений.

Театр и кино

Персонализация рекламы, фиксация реакции на контент.

Социальные сети

Массовое распознавание эмоциональной реакции.

Видеоконференции

Тренировка в выражении и распознавании эмоций.

Личное распознавание

Исследование настроений общества.

Исследовательские группы

Facescope: теоретический подход к пониманию эмоций

Как это работает?

Основой анализа в системе FACS является двигательная единица – AU* (Action Unit), как характерное изменение поверхности лица в форме отдельного движения (например, губ, бровей, век, носогубных складок).

Система кодирования лицевых движений (FACS)

Радость определяется как сочетание AUs 6+12; 2 грусть — как сочетание A.

Пример 2

AU2 – это поднятие внешней части брови

AU41 – опускание надпереносья

AU20 – растяжение губ

Пример 1

*AU — 60+ совокупностей точек, ответственных за определенные эмоции.

Архитектура сервиса