BravoNota: нейросеть, которая распознаёт аккорды

Продукт начался с реальной семейной задачи

Для занятий музыкой дочери нужен был простой метроном без рекламы, регистрации и отвлекающих экранов. Затем появились тюнер, строи для разных инструментов, библиотека аккордов и спектрограмма.

Следующим шагом стало распознавание гармонии: загрузить запись, увидеть, где звучит каждый аккорд, и сразу проверить результат на слух.

Почему понадобилась собственная модель

Готовые исследовательские модели помогли понять направление, но не давали надёжной основы для собственного продукта. Главной работой стало создание набора музыкальных примеров с точной разметкой аккордов по времени.

Данные очищались, проверялись и дополнялись так, чтобы модель работала на разных инструментах, темпах и стилях. В разметке помогала вся семья.

• собственный набор данных
• точная временная разметка
• проверка качества примеров
• повторное обучение и сравнение версий

Как выглядит результат для музыканта

Приложение распознаёт 170 классов аккордов и объединяет соседние ответы в удобные отрезки времени. Пользователь видит название аккорда, начало и длительность, а также степень согласованности результата.

Для сложной записи можно включить углублённый режим: приложение анализирует несколько вариантов звучания и выбирает наиболее устойчивый ответ.

• 170 классов аккордов
• временная шкала
• переход к нужному фрагменту
• прослушивание и экспорт результата

Конфиденциальность заложена в продукт

Запись декодируется и анализируется на устройстве. Микрофон для тюнера и спектрограммы также обрабатывается локально, а результаты хранятся в области приложения.

Для основных функций не нужны учётная запись, рекламный профиль или аналитическая система.

• работа модели на устройстве
• без серверного распознавания
• без обязательной регистрации
• без рекламных модулей