Ученые из Петербурга разработали нейросеть, которая умеет одновременно определять эмоции человека, оценивать воспринимаемые черты его личности и замечать признаки неуверенности или противоречивого поведения. Над проектом работали специалисты НИУ ВШЭ, Петербургского Федерального исследовательского центра РАН и Центра практического ИИ Сбербанка.

Модель анализирует сразу несколько источников информации: видео, голос, содержание речи, мимику, направление взгляда, позу и жесты, пишет РИА «Новости». При этом алгоритм учитывает, какие данные наиболее важны для конкретной задачи: например, при оценке черт личности большую роль играет видео, а при поиске признаков амбивалентности — содержание речи.

Нейросеть обучали на суперкомпьютере «Харизма». Разработчики объединили общие компоненты разных наборов данных, что позволило улучшить работу модели с незнакомыми для нее материалами.

В будущем технологию планируют использовать в образовательных системах и интеллектуальных интерфейсах. Ученые также создают цифровых аватаров, которые смогут менять речь, мимику и поведение в зависимости от эмоционального состояния пользователя.

А о том, как в Ленобласти искусственный интеллект помогает выявлять рак молочной железы, можно прочитать здесь.