Исследование возможности применения сверточных сетей при решении задачи детектирования и трассировки рук человека в видеопотоке

Abstract

В данной выпускной квалификационной работе исследованы возможности применения сверточных сетей при решении задачи детектирования и трассировки рук человека в видеопотоке. Разработана автоматизированная система, позволяющая управлять контентом при помощи жестов. Сформулированы требования к техническому обеспечению и обоснован выбор средств автоматизации. Проведено исследование качества детектирования и трассировки рук человека в видеопотоке посредством Каскада Хаара и YOLO, оценена точность полученных результатов. В результате исследований для решения поставленной задачи была выбрана сверточная нейронная сеть YOLO. Автоматизированная система реализована на языке C# в среде программирования VisualStudio 2019 и функционирует под управлением операционной системы Windows 7. Для распознавания жестов использована приставка Kinect, в которой присутствует камера глубины. Ее наличие позволяет более точно распознавать жесты, подаваемые человеком.