Первый в мире голосовой ИИ с эмоциональным интеллектом (EQ) создали в Нью-Йорке. Модель умеет распознавать 48 основных эмоций по фото, видео и тональности голоса. Он улавливает изменения в тоне, ритме, тембре голоса и подстраивается под контекст диалога, передает ИА UssurMedia.
Эмпатическую большую языковую модель обучали не только на текстах, видео и аудио, но и на данных 10-летних исследований в области EQ.
В демо-версии есть опция Start Call. Нажав на нее, можно выбрать одного из шести ИИ-ассистентов, поговорить с ним или с ней на любую тему и получить обратную связь о своем настроении. У каждого виртуального собеседника свой характер, темперамент и манера речи, а весь разговор сразу преобразуется в текст.
Беседа с ботом очень похожа на общение с живым человеком. ИИ перестает говорить, когда его прерывают, и внимательно слушает, соблюдая естественные паузы в разговоре. А главное, бот реагирует с эмпатией: он улавливает изменения в тоне, ритме, тембре голоса и подстраивается под контекст диалога. В результате, собеседник получает обратную связь с указанием трех основных эмоций, например, радость, скепсис и чувство вины.
По мнению разработчиков, бот поможет в улучшение качества колл-центров; в модерации и аналитике обсуждений в соцсетях и переговоров; нейросеть может стать эмпатичным ИИ-ассистентом и домашним роботом-помощником. ИИ может быть задействован в маркетинге и UX-исследованиях, гейминге и технологиях VR и AR, здравоохранении, например, в скрининге ментального здоровья и обучение ботов-психологов.
