Выявление проблемных вопросов по социально-направленным тематикам на основе данных открытых источников

Abstract

В работе предложен подход к выявлению проблемных вопросов по данным открытых источников для социально-направленных тематик. Подход предполагает использование текстов и метаданных публикаций в открытых тематических группах и на публичных страницах пользователей в социальных сетях. Выполняется многоэтапная обработка данных попубликациям: сбор данных, очищение от спама, фильтрация по проблемной области, определение тональности, классификация по темам, кластеризация. Программная реализация предложенного подхода выполнена на основе Цифровой платформы интегрального мониторинга. Экспериментальная апробация проведена на данных социальной сети VK.Применение подхода позволяет выявить остросоциальные проблемные вопросы административного региона в оперативном режиме.