1. Репозиторий Самарского национального исследовательского университета имени академика С.П. Королёва
  2. 05. Выпускные квалификационные работы
  3. Выпускные квалификационные работы
Full metadata record
DC FieldValueLanguage
dc.contributor.authorДмитриев Д. О.
dc.contributor.authorКлиментьев К. Е.
dc.contributor.authorМуравьева Е. В.
dc.coverage.spatialchunked-кодирование
dc.coverage.spatialgzip-сжатие
dc.coverage.spatialавтоматизированные системы
dc.coverage.spatialанализ гиперссылок
dc.coverage.spatialвеб-системы
dc.coverage.spatialинтернет-ресурсы
dc.coverage.spatialнеиндексируемый контент
dc.coverage.spatialпоиск ключевых слов в содержимом страниц
dc.coverage.spatialрекурсивный обход страниц
dc.coverage.spatialсжатие данных
dc.coverage.spatialсканирование неиндексируемого контента Интернет-ресурсов
dc.coverage.spatialформаты передачи данных
dc.creatorДмитриев Д. О.
dc.date2025
dc.date.accessioned2025-11-27T12:13:51Z-
dc.date.available2025-11-27T12:13:51Z-
dc.date.issued2025
dc.identifier.identifierRU\НТБ СГАУ\ВКР20250715111153
dc.identifier.citationДмитриев, Д. О. Автоматизированная система сканирования неиндексируемого контента Интернет-ресурсов : вып. квалификац. работа по направлению подгот. 09.03.01 "Информатика и вычислительная техника" (уровень бакалавриата), профиль "Информационные системы" / Д. О. Дмитриев ; рук. работы К. Е. Климентьев ; нормоконтролер Е. В. Муравьева ; М-во науки и высш. образования Рос. Федерации, Самар. нац. исслед. ун-т им. С. П. Королева (Самар. ун-т) ; Ин-т информа. - Самаpа, 2025. - 1 файл (4,2 Мб). - Текст : электронный
dc.identifier.urihttp://repo.ssau.ru/jspui/handle/123456789/45868-
dc.description.abstractВ выпускной квалификационной работе рассматриваются вопросы сканирования неиндексируемого контента Интернет-ресурсов. Цель работы – разработка автоматизированный системы сканирования неиндексируемого контента Интернет-ресурсов. В ходе выполнения ВКР была разработана автоматизированная система сканирования неиндексируемого контента интернет-ресурсов. Исследованы методы обработки веб-страниц с учетом различных форматов передачи данных, включая chunked-кодирование и gzip-сжатие. Разработан алгоритм рекурсивного обхода страниц в пределах заданного IP-адреса с возможностью настройки глубины поиска от 2 до 5 уровней. Реализован механизм извлечения и анализа гиперссылок с фильтрацией по домену. Реализован поиск заданного ключевого слова в содержимом страниц. В процессе разработки были получены практические навыки работы с сетевыми протоколами и обработки веб-контента, что позволило повысить знания принципов современных веб-систем. В рамках работы был проведен анализ предметной области и существующих систем-аналогов,
dc.subjectchunked-кодирование
dc.subjectgzip-сжатие
dc.subjectавтоматизированные системы
dc.subjectанализ гиперссылок
dc.subjectвеб-системы
dc.subjectинтернет-ресурсы
dc.subjectнеиндексируемый контент
dc.subjectпоиск ключевых слов в содержимом страниц
dc.subjectрекурсивный обход страниц
dc.subjectсжатие данных
dc.subjectсканирование неиндексируемого контента Интернет-ресурсов
dc.subjectформаты передачи данных
dc.titleАвтоматизированная система сканирования неиндексируемого контента Интернет-ресурсов
dc.typeText
local.contributor.authorМинистерство науки и высшего образования Российской Федерации
local.contributor.authorСамарский национальный исследовательский университет им. С. П. Королева (Самарский университет)
local.contributor.authorИнститут информатики и кибернетики
local.identifier.oldurihttp://repo.ssau.ru/handle/Vypusknye-kvalifikacionnye-raboty/Avtomatizirovannaya-sistema-skanirovaniya-neindeksiruemogo-kontenta-Internetresursov-116791
local.identifier.oldurihttp://repo.ssau.ru/handle/Vypusknye-kvalifikacionnye-raboty/Avtomatizirovannaya-sistema-skanirovaniya-neindeksiruemogo-kontenta-Internetresursov-116791
Appears in Collections:Выпускные квалификационные работы

Files in This Item:
File SizeFormat 
Дмитриев_Данила_Олегович_Автоматизированная_система_сканирования_неиндексируемого.pdf4.3 MBAdobe PDFView/Open    Request a copy
Show simple item record


Items in Repository are protected by copyright, with all rights reserved, unless otherwise indicated.