Shimon — музыкальный робот, созданный в Georgia Tech’s Center for Music Technology — умеет писать и петь свои собственные песни, играя на маримбе (вариант ксилофона).
Первый альбом робота выйдет на Spotify 10 апреля.
Языковая модель робота была обучена на 50’000 текстах песен из джаза, рока и хип-хопа. Используя ключевое слово, программа генерирует тысячи фраз, которые относятся к самому слову, его синонимам или его антонимам. Фраза выбирается подходящей для песни если она подходит по рифме и тематическому сходству.
После того, как лирика готова, люди выбирают подходящую мелодию, которая генерируются и соответствует словам.
Голос робота основан на модели, разработанной Университетом Pomeu Fabra и обученной на различных человеческих голосах.
Создатели робота (Gil Weinberg, Richard Savery) стремятся объединить его музыкальные импровизации и лирические навыки, чтобы превратить робота в фристайл рэпера.
Работа над данным робототехническим проектом длится уже почти десятилетие.
Ссылки
Musical Robot Learns to Sing, Has Album Dropping on Spotify
По теме
Робот игрет на пианино при помощи скелетоподобной руки
Орган из 44 игрушек Furby
Nod Bang — создание ритма при покачивании головы
Роботизированный барабан на Arduino
MIDI контроллер на Arduino