ВШЭ разработала ИИ-инструмент для анализа поведения
Алгоритм распознаёт эмоции и жесты с точностью до 92%.
Исследователи из НИУ ВШЭ в Санкт-Петербурге создали алгоритм для анализа невербального поведения. Система обрабатывает видео, выделяя 68 ключевых точек на лице, 21 жест рук и позу человека.
Инструмент работает на обычных камерах без датчиков глубины. Он определяет 13 основных эмоций, включая радость, гнев и удивление. Точность распознавания достигает 92% для статичных поз и 84% для движений.
Разработку протестировали в двух экспериментах. В первом участники смотрели видео, а алгоритм фиксировал их реакцию. Во втором анализировали взаимодействие людей в диалоге.
Систему можно применять в психологии, маркетинге и образовании. Например, она поможет оценить вовлечённость студентов на лекциях или реакцию зрителей на рекламу. Сейчас модель дорабатывают для работы в сложном освещении и с разными ракурсами.
Исходный код опубликован в открытом доступе. Разработчики предлагают дообучать модель для решения задач — от анализа поведения водителей до телемедицины.
