Проектирование и реализация автоматизированной системы анализа текстовой информации для определения заимствований

Abstract

Объектом исследования являются алгоритмы поиска текстовых заимствований.Цель работы – с применением методов текстового анализа обнаружить заимствования путем сравнения двух текстовых документов и определить степень самостоятельности автора.Спроектирована и реализована автоматизированная система поиска текстовых заимствований и определения уникальности проверяемого документа – выбран метод Surrounding Context N-Grams и предложена модификация алгоритма определения уникальности. На тестовых фрагментах текстов произведена оценка алгоритма, реализованного c применением существующих библиотек и методов. Исследованы и описаны основные режимы работы автоматизированной системы и произведена оценка качества полученного алгоритма.