Специалисты ИТМО разработали систему, которая анализирует человека на видеозаписи и определяет, говорит ли спикер правду.
Система «Expert» работает на основе нейросетей. Они способны проанализировать лицо говорящего на видео, его интонации и слова. Метод позволяет определить, уверенно ли чувствует себя человек, где он врет или проявляет скрытую агрессию.
Около 350 параметров используется для того, чтобы определить уровень уверенности говорящего. Эмоции и изменения в интонации фиксируются по 16 показателям: повышение и понижение голоса, другие.
Нейросеть описывает лицо человека с помощью 317 точек. Когда говорящий выражает какую-либо эмоцию, нейросеть отмечает изменения показателей. Система «Expert» предоставляет итоговые данные сразу после окончания воспроизведения видео.
@petrolenspb@agregiruem