Publication: Разработка системы для распознавания эмоций в речи и мимике с использованием глубокого обучения
Дата
2023
Авторы
Пирова, Д. Ф.
Journal Title
Journal ISSN
Volume Title
Издатель
Аннотация
Целью ВКР является разработка системы для распознавания эмоций в речи и мимике с использованием глубокого обучения. По структуре работа разделена на 4 раздела. Первая глава исследования представляет обзор методов распознавания эмоций в речи и мимике. Рассматриваются особенности существующих баз данных эмоциональной речи, техники анализа тональности и интонации речи, анализ мимических выражений. Во второй главе исследования будет рассмотрено моделирование системы распознавания эмоций в речи на русском языке с использованием нейронных сетей. Приводится описание разработки аннотированного датасета эмоциональной речи, а также методика представления фрагментов речи в виде изображений для улучшения точности распознавания эмоций. Также описывается разработка система синтеза и модификации аудиовизуальных эмоций. Используемые методы включают компьютерное зрение, обработку естественного языка и машинное обучение. Результатом исследования будет система распознавания эмоций в речи на русском языке, способная повысить качество распознавания и улучшить коммуникацию человека с компьютером. В третьей главе представлена инженерная часть работы: в данной главе исследования будет детально рассмотрен процесс создания системы распознавания эмоций в речи и мимике, включая выбор инструментов разработки, обоснование принятых решений, предобработку данных и обучение нейронной сети, а также демонстрацию пользовательского интерфейса и описание его функциональности. В четвертой главе исследования представлено описание процесса тестирования и валидации разработанной системы, а также описание основных метрик, используемых для оценки качества системы. В заключении подводятся итоги проведенной работы с кратким описанием результатов по каждому разделу.
Описание
Уровень образования: магистратура; Код направления/специальности: 09.04.04; Группа: М21-524
Ключевые слова
ВКР , Выпускная квалификационная работа
Цитирование
Пирова, Д. Ф. Разработка системы для распознавания эмоций в речи и мимике с использованием глубокого обучения : Выпускная квалификационная работа, магистратура, 09.04.04 / Д. Ф. Пирова ; рук. работы Рословцев Владимир Владимирович, 2023