Лингвисты из Санкт-Петербургского кампуса НИУ ВШЭ разработали специальный эмоциональный словарь, который поможет искусственному интеллекту эффективнее распознавать человеческие чувства. Над проектом работали исследователи Лаборатории языковой конвергенции — Анастасия Колмогорова и Елизавета Куликова. Информацию опубликовало издание «Вечерний Санкт-Петербург»
Команда собрала уникальный мультимодальный датасет, включающий 909 видеороликов общей продолжительностью почти три часа. Каждый фрагмент был оценен сразу по шести основным эмоциям.
Такой подход позволил создать полноценную базу для обучения языковых моделей: системы смогут учиться различать эмоции не только по речи, но и по другим коммуникативным каналам.
Главная идея работы — дать машинам возможность лучше распознавать настроение, выраженное человеком, и, таким образом, сделать искусственный интеллект более восприимчивым к эмоциям пользователей. Исследователи уверены, что их эмоциональный словарь станет основой для дальнейших разработок в области эмпатичных и человечных цифровых технологий.
Комплекс «Взор» контролирует активность пользователей ПК. «Взор» состоит из двух приложений: клиентского, которое фиксирует действия пользователя, включая нажатия клавиш и процессы, и серверного — для обработки и хранения данных, а также видеотрансляции экранов в реальном времени.