Компания ROLI представила интеллектуального помощника для обучения игре на фортепиано. Система под названием AI Music Coach способна в реальном времени слушать исполнение, отслеживать движения рук и давать персональные рекомендации во время занятий.
Разработчики считают, что новая технология поможет решить одну из главных проблем самостоятельного обучения музыке – отсутствие постоянной обратной связи от преподавателя.
В основе системы лежит многоуровневая сенсорная платформа. Помимо анализа звука, AI Music Coach использует инфракрасную камеру для отслеживания рук музыканта. Камера фиксирует положение 27 контрольных точек на каждой руке со скоростью 90 кадров в секунду.
Это позволяет искусственному интеллекту оценивать не только правильность нажатия клавиш, но и технику исполнения: положение пальцев, плавность движений и общую посадку за инструментом.
Благодаря этому система может выявлять ошибки, которые невозможно заметить при анализе одних лишь нот.
Важной частью проекта стала функция голосового взаимодействия. Пользователь может задавать вопросы, получать объяснения и советы в процессе игры. Программа адаптирует темп и сложность занятий в зависимости от текущего уровня и прогресса ученика. Приложение поддерживает более 40 языков и не требует знания нотной грамоты.
Уроки не привязаны к жесткому сценарию: система постоянно подстраивается под исполнителя, создавая индивидуальную траекторию обучения.
Публичная бета-версия AI Music Coach появится в приложении ROLI Learn в ближайшие месяцы. Сервис будет доступен вместе с поставками нового оборудования Airwave. Стоимость продукта пока не раскрывается. AI Music Coach позиционируется как постоянный цифровой помощник, который дополняет занятия и усиливает обратную связь, помогая ученику развиваться в удобном для него темпе.
Читайте по теме. Как приложение OpenWav хочет починить музыкальную индустрию
