Publication: Разработка системы анализа поведения пользователей на основе открытых данных с применением технологии Hadoop
Дата
2016
Авторы
Алешина, А. А.
Journal Title
Journal ISSN
Volume Title
Издатель
Аннотация
Дипломный проект на тему: «Разработка системы анализа поведения пользователей на основе открытых данных с применением технологии Hadoop» содержит 73 страницы текста, рисунков – 23, таблиц – 3, использованных источников – 32, приложений – 3. Ключевые слова: ранжирование данных, Twitter Streaming API, распределённые системы, Hadoop, тональность, Web-интерфейc, Apache Tomcat, HTML5. Целью дипломной работы стала разработка платформы, предназначенной для анализа данных из открыто потока сообщений социальной сети Twitter. В первой главе приведен обзор существующих систем для анализа данных из открытого потока сообщений Twitter Streaming API, изучены способы ранжирования данных в соответствии с их важностью, рассмотрены необходимые инструменты для разработки системы. Во второй главе описывается архитектура предлагаемой системы анализа, выполняется разработка общего алгоритма работы системы, алгоритма непрерывной анализа входящего потока данных, алгоритма пакетной обработки входящих данных, подсистем хранения и доставки пользователю результатов анализа. Третья глава посвящена реализации компонентов системы и их тестированию. Описываются процессы развёртывания готовых открытых проектов, их доработка и подключение к системе для выполнения своих задач. Проводится тестирование готовой системы. Данная работа имеет практическую значимость, поскольку в результате нее был разработан новый комплексный программный продукт, расширяющий функциональность имеющихся средств анализа данных.
Описание
Уровень образования: бакалавриат; Код направления/специальности: 09.03.01; Группа: К08-122
Ключевые слова
ВКР , Выпускная квалификационная работа
Цитирование
Алешина, А. А. Разработка системы анализа поведения пользователей на основе открытых данных с применением технологии Hadoop : Выпускная квалификационная работа, бакалавриат, 09.03.01 / А. А. Алешина ; рук. работы Ровнягин Михаил Михайлович, 2016