Робот Шимон композитор, поэт и исполнитель песен

Исследователи из Технологического института Джорджии работают над улучшением музыкального робота по имени Шимон. Теперь робот не просто играет музыку, он также пишет слова к своим песням и сам поет их. Шимон — четырех-рукий робот с шаровидной головой. Он держит в «руках» маленькие молотки, чтобы играть на ксилофоне, называемом маримба. Пока Шимон играет, его голова движется в такт музыке. Шимон уже довольно давно работает музыкальным роботом. Еще в 2015 году он играл с другими музыкантами в Кеннеди-центре в Нью-Йорке. То, что робот мог делать тогда, было уже довольно круто.

Глубокое обучение

Используя «глубокое обучение», робота научили писать собственную музыку. Глубокое обучение, также известное как искусственный интеллект (AI), означает, что компьютерные программы глубоко сортируют огромные объемы информации. Это позволяет им находить закономерности, которые люди могли не заметить. Затем программы могут использовать эти шаблоны новыми и неожиданными способами. Используя «глубокое обучение», его научили писать собственную музыку. Он может создавать свою музыку в реальном времени, играя с другими музыкантами. Так сказать — импровизировать.

Теперь Шимон вернулся с целой кучей новых трюков. Он может писать слова к своим песням и петь их. Робот научился писать слова для песен так же, как он научился писать музыку. Сочинял и «скармливал» тысячи и тысячи примеров. Этот «технологический музыкант» был обучен текстам (словам) 50 000 песен. Профессор Технологического института Джорджии Гил Вайнберг, который возглавляет проект Shimon. Помогает роботу выдвинуть стартовую идею. Затем Шимон пишет тексты, основанные на этой идее. Г-н Вайнберг обычно предоставляет большую часть музыки для песен, но Шимон тоже помогает.

Робот отправится в тур

Ричард Савери, один из исследователей, говорит: «Вы задаете такое слово, как «буря». А он будет генерировать целую кучу связанных слов, таких как «дождь»». Он говорит, что Шимон придумывает множество идей, сохраняет хорошие и развивает их. Пение песен — совсем другая история. Чтобы дать Шимону право голоса. Команда Технологического института Джорджии работала с экспертами из Университета Помпеу Фабра в Испании. Голос был создан с использованием искусственного интеллекта и очень похож на мужской. Лицо Шимона также приобрело новые черты. Рот Шимона теперь плавно движется в реальном времени, когда он поет. У него также есть брови, которые позволяют его лицу выражать больше эмоций.

  Шимон, поющий робот, который трясет головой. В ближайших планах собирается выпустить самый популярный новый альбом роботов 2020 года. видео: youtube.com

Чтобы продемонстрировать Шимона и его новые способности. Исследователи записали одну из песен Шимона под названием «Into Your Mind». Они сняли клип на песню, который уже есть на YouTube.
Позже этой весной команда планирует выпустить альбом из 8-10 песен Шимона. Альбом выйдет на музыкальном сервисе Spotify. Также есть планы, что Шимон поедет в тур с группой, чтобы играть и петь его песни вживую. По мнению г-на Вайнберга, главная цель проекта Shimon — не добиться того, чтобы роботы захватили власть. А чтобы роботы и люди вместе создавали что-то прекрасное.

Кстати, в новой песне робота есть слова надежды для людей. Застрявших дома из-за коронавируса: «Дом, где приходит радуга».