Аспирант Илья Боровик из Сколковского института науки и технологий решил разработать особое приложение, которое поможет людям без специального образования выражать свои музыкальные эмоции. Вместе с соавтором из Германии автор создал программу, при помощи которой пользователи могут менять музыкальное произведение, воздействуя на него голосом, мимикой и даже жестами.

Приложение берёт за основу ноты, а затем меняет их согласно инструкциям пользователя, который может задать иной темп, длительность и громкость. Таким образом можно сделать любую композицию медленнее или быстрее, а также изменить её тональность или отдельные музыкальные фразы. В итоге программа выдаёт совершенно иное исполнение известного произведения, настроенного под вкусы пользователя.

При этом Боровик подчёркивает, что мощный инструментарий приложения доступен каждому за счёт своей простоты. Любой человек может установить программу на свой смартфон, а затем использовать камеру и микрофон, чтобы выбрать нужную композицию из базы данных и поменять её. Алгоритм считывает даже сложные эмоции на лице и адаптирует их под итоговый результат.

Сейчас авторы уже сделали рабочую демоверсию, в которую включён искусственный интеллект, обученный исполнять 236 произведений для фортепиано. При этом программа может создать 1067 вариаций этих композиций благодаря специальным меткам в партитурах. Однако в будущем разработчики планируют расширить музыкальную базу данных, включив в неё оркестровую музыку, а также упростить интерфейс, чтобы пользователь достигал желаемого результата быстрее.

• Телеграм
• Дзен
• Подписывайтесь на наши каналы больше новостей без политики в наших каналах