Искусственный интеллект научился играть на пианино
Команда Вашингтонского университета задалась вопросом, может ли искусственный интеллект обучить игре на пианино. Исследователи использовали машинное обучение для создания системы под названием Audeo, которая создает музыку из беззвучного видео с игрой на пианино.
Когда группа протестировала произведения, созданные Audeo, с помощью приложений для распознавания музыки, таких как SoundHound, приложения правильно определили произведение, которое Audeo проигрывает, примерно в 86% случаев. Для сравнения, эти приложения в 93% случаев идентифицировали фрагмент в аудиодорожках исходных видео. Исследователи представили Audeo на конференции NeurIPS 2020.
Когда группа протестировала произведения, созданные Audeo, с помощью приложений для распознавания музыки, таких как SoundHound, приложения правильно определили произведение, которое Audeo проигрывает, примерно в 86% случаев. Для сравнения, эти приложения в 93% случаев идентифицировали фрагмент в аудиодорожках исходных видео. Исследователи представили Audeo на конференции NeurIPS 2020.
«Раньше считалось невозможным создать музыку, которая звучит так, как будто ее играет живой человек. Алгоритм должен определить по видео особенности, связанные с воспроизведением музыки. Для этого требуется система, которая должна сочетать точность и творческую составляющую. Тот факт, что мы добились довольно хорошей музыки, стал сюрпризом», - сообщают авторы.