Автоматизированная система обработки и классификации текстовых сообщений с использованием RAG-технологий

Abstract

Работа посвящена разработке автоматизированной системы обработки и классификации текстовых сообщений с использованием RAG-технологий. Значительная часть работы уделена анализу существующих методов классификации текстов, RAG-подходов и мультиагентных систем, а также проектированию архитектуры системы и моделей данных. Часть работы связана с программной реализацией веб-приложения на FastAPI, мультиагентного графа на LangGraph и RAG-модуля на базе векторной базы данных Chroma и моделей эмбеддингов HuggingFace. В работе приведены результаты тестирования системы на демонстрационной предметной области, включая классификацию сообщений, RAG-ответы на информационные вопросы и извлечение структурированных данных из заявок. Реализованная система обрабатывает каждое сообщение независимо, не сохраняя историю диалога. Извлечённые из сообщений заявки сохраняются в реляционной базе данных PostgreSQL в единственной таблице. Классификация и извлечение данных выполняются с помощью языковой модели, работающей локально через Olla