Автоматизированная система оцифровки изображений нотных листов

Abstract

Объектом исследования является процесс автоматического распознавания музыкальных символов (нот, октав и длительностей) по их изображению на нотном листе с использованием свёрточной нейронной сети. Цель работы – разработка и экспериментальное подтверждение работоспособности программного комплекса для распознавания нотной записи с последующей визуализацией на виртуальном пианино и MIDI- воспроизведением.В процессе работы использованы методы машинного обучения (свёрточные нейронные сети), цифровой обработки изображений, а также технологии веб-разработки (Spring Boot, Flask, JavaScript). Эффективность работы заключается в создании действующего веб- приложения, позволяющего пользователю загружать нотный лист, выделять отдельные символы, получать их расшифровку (нота, октава, длительность) с одновременной подсветкой соответствующей клавиши на экранном пианино и звуковым воспроизведением, что может быть использовано в музыкальной педагогике и для автоматической оцифровки нотных материалов.