2022, Клычков, М. Д., Клычков, Матвей Дмитриевич, Самсонович Алексей Владимирович

Ключевые слова: UNITY3D, EBICA, СОЦИАЛЬНО-ЭМОЦИОНАЛЬНЫЙ ИНТЕЛЛЕКТ, ВИРТУАЛЬНЫЙ АКТОР, МАШИННОЕ ОБУЧЕНИЕ, РЕККУРЕНТНЫЕ СЕТИ Целью данной научно-исследовательской работы является создание прототипа Виртуального Актора с многомодальным интерфейсом, модель интеллекта которого основана на когнитивной архитектуре eBICA. Существует два глобальных подхода к созданию социально-эмоционального интеллекта. Один основанный на нейросетях, другой на когнитивных архитектурах. В ходе работы над ВКР был разработан и протестирован с участием испытуемых прототип Виртуального Актора, обладающий социально-эмоциональным интеллектом и помещенный в виртуальное окружение, которое создано при помощи графического движка Unity3d, была реализована система для анализа речи с выявлением эмоций соответствующим речевым признакам, так же были в дополнении к вышеуказанной системе, были спроектированы и реализованы методы воздействия на виртуального агента, основывающиеся на семантической составляющей речевого контекста. Данная работа является актуальной поскольку на данный момент эта область находится на начальных этапах развития и активной интеграции в различные индустрии. Созданная и протестированная модель интеллекта затем может быть интегрирована в другие проекты с Виртуальным Актором: виртуальный слушатель, виртуальный клоун, виртуальный танцор.

2023, Evchenko, I. V., Klychkov, M. D., Клычков, Матвей Дмитриевич

2022, Samsonovich, A. V., Dodonov, A. D., Klychkov, M. D., Budanitsky, A. V., Grishin, I. A., Anisimova, A. S., Самсонович, Алексей Владимир, Клычков, Матвей Дмитриевич

© 2022, The Author(s), under exclusive license to Springer Nature Switzerland AG.A cognitive model of the virtual clownery paradigm is developed, in which two clowns perform on a virtual stage, interacting with each other. Agents controlling virtual clown behavior were designed and implemented based on the eBICA cognitive architecture and embedded into the virtual environment, where they controlled two avatars. Clownery action was generated using the paradigm of ad hoc improvisation, without any given scenario. In this study, the output was produced as text, and the action was not visualized. In parallel, a number of scenarios were written by a group of experts using the same paradigm and behavioral repertoire. The two sets of scenarios were compared to each other in a number of characteristics. Results show which particular features of the model result in believable and socially attractive behavior. Implications concern socially-emotional intelligent agents for practically useful domains.