Достижения искусственного интеллекта практически постоянно оказываются в центре новостной повестки, какую пользу они могут принести в развитии музыкального образования?

Помимо споров о том, что создание музыкальных произведений с помощью искусственного интеллекта сильно затрагивает авторские права исполнителей, в музыкальном образовании, напротив, наблюдается устойчивое развитие инноваций на основе ИИ в приложениях для репетиций, виртуальных аккомпаниаторах и других разных инструментах для повышения производительности. Интеграция ИИ в музыкальное образование стала главной темой конференции Американской ассоциации преподавателей струнных инструментов в Аданте в этом году. Докладчики и делегаты обсуждали приложения на базе ИИ, которые уже используют ученики и учителя; рассматривали одни из последних разработок на основе ИИ для анализа осанки, движений и звука, а также перспективы развития ИИ в музыкальном образовании.

Приложения для репетиции на основе ИИ, такие как Violy, уже могут давать учащимся обратную связь в режиме реального времени по элементам их игры, таким как интонация и ритм. Междисциплинарная группа исследователей из Университета Пердью в Уэст-Лафайете, штат Индиана, идет еще дальше, создавая корректора на базе ИИ для струнных исполнителей, который не только оценивает высоту звука и ритмическую точность, но и анализирует осанку исполнителя с помощью технологии компьютерного зрения. Приложение сначала разрабатывается для виолончели, поскольку ведущий исследователь Кристен Ён-Джи Юн и ее научные сотрудники являются виолончелистами, а также потому, что с большим струнным инструментом некоторые движения компьютерным зрительным моделям легче отслеживать. Та же технология используется в мире спорта для анализа биомеханики спортсмена, например, для отслеживания замаха в гольфе или теннисе или для оценки осанки бегуна (приложение Evaluator). Но Юн говорит, что приложения для исполнения музыки требуют более тонкой настройки и чувствительности при анализе: «Спортивные движения обычно намного масштабнее, тогда как при игре на виолончели вы сидите, и у вас есть небольшие изменения в движениях, такие как угол наклона смычка к грифу, что может оказать большое влияние на звук».

Evaluator — не единственное такого рода. Ученые из Мэрилендского университета разрабатывают приложение для обучения игре на скрипке на базе ИИ, которое анализирует осанку, движения смычка и руки, а также звук. Приложение SkyNote для обучения игре на скрипке на iOS использует искусственный интеллект и аудио анализ для предоставления обратной связи в режиме реального времени о качестве звука, высоте тона и ритме. Оно было создано в результате сотрудничества между Университетом Помпеу Фабра в Барселоне и партнерами, включая Лондонский Королевский музыкальный колледж.

ИИ также преобразовывает функциональность виртуального аккомпанемента и инструментов для совместной практики. Такие приложения, как TomPlay и PartPlay, позволяют пользователям играть вместе с записанным фортепианным, камерным или оркестровым аккомпанементом, при этом музыканты могут замедлять сложные пьесы или зацикливать пассажи, которые они хотят отрабатывать несколько раза подряд. Но с более сложными приложениями на базе ИИ, такими как MyPianist и Cadenza, дорожка аккомпанемента может реагировать на пользователей во время игры, подстраиваясь в реальном времени под выбор темпа и фразировки музыкантов, например, рубато. Сейчас ученые изучают этот подход в другом своем исследовательском проекте над созданием приложения, которое нацелено на обучение и реагирование в реальном времени на интерпретацию пользователя, а также включает голосовые команды, чтобы пользователь мог устно управлять различными аспектами аккомпанемента. Один из исследователей говорит, что это похоже на человеческий опыт: чем больше вы играете с кем-то в чате, тем лучше вы узнаёте стиль игры этого человека. ИИ может постепенно предугадывать ваши темпы, фразировку и динамику, изучая, как вы играете произведение.

Для учителей может оказаться полезной возможность изучать аналитику занятий с помощью таких приложений, как Violy и Evaluator. Например, Violy позволяет учителям просматривать и комментировать интонацию, ритм и записи занятий учеников, а также предлагает систему работы с учениками, позволяющую учителям проверять домашние задания и практические занятия, а также организовывать групповые или даже видеоуроки.

Тем не менее, педагоги, рассматривающие возможность использования чат-ботов на основе ИИ для составления планов уроков, должны помнить о несовершенстве ИИ, в частности, нередко встречающимся свойстве «галлюцинировать» и генерировать вводящую в заблуждение информацию. Искусственный интеллект может помочь со структурированием и организацией урока, но ученики и педагоги должны проверять и корректировать содержание, поэтому человеку по-прежнему нужно применять свои знания. Все дело в том, чтобы научить студентов разумно использовать эти инструменты, примерно так же, как опытные педагоги не хотят, чтобы ученик слишком полагался на тюнер или метроном.

Отмечая растущую сложность приложений генераторов музыкальных произведений на основе ИИ, таких как Suno и AIVA, ученые соглашаются с тем, что создание сложной нотной записи, а не просто аудио, пока находится за пределами возможностей ИИ. Есть также разница между диагностикой искусственным интеллектом проблем с исполнением и назначением корректирующих мер. Исправление требует мышления более высокого уровня и затрагивает сферу художественных и интерпретационных решений.