публикувано на 28-09-2019

Музикалният проект на Google AI Magenta Drops Beats Like Humans

Когато китаристът на Queen Брайън Мей създаваше гръмотевичния звук "Thump thump clap", който ще се превърне в въвеждането на техния мегахит We Will Rock You, неговият опит във физиката му помогна изключително много. Мей използва серия от индивидуални надценки, за да изгради великолепния и отзвучаващ звук върху щамповащите удари. „По-късно хората са проектирали машина, за да го направят“, Мей извика относно процеса на ръчно наслояване. Всъщност новите технологии коренно промениха музикалната индустрия от 80-те години. А нова машина вече създава бръмчане в музикалната общност.

Magenta Studio е проект на Google Brain „изследва ролята на машинното обучение като инструмент в творческия процес.“ Екипът на Google Brain създаде отворения код за създаване на музика, използвайки модели за машинно обучение. Комплектът включва четири инструмента: Продължете, Генерирайте, Интерполирайте и GrooVAE. Музикантите могат да използват моделите на своите клипове MIDI (Musical Instrument Digital Interface). Понастоящем пакетът инструменти се предлага като самостоятелно приложение Electron и като плъгин за софтуерния музикален секвенсър и дигитална аудио работна станция Ableton Live, който първоначално е проектиран като инструмент за изпълнения на живо, но сега също се използва широко за композиране на музика, запис, подреждане, смесване и мастеринг.

„Според мен най-интересната характеристика на Magenta е GrooVAE“, казва музикантният продуцент, базиран в Торонто, Райън Макдугал. „В момента другите приложения могат да хуманизират звука само като пускат произволни вариации. Magenta Studio изглежда различно, използвайки обучение за невронни мрежи. "

Въпреки че напредналите технологии са подобрили производството на музика по отношение на ефикасността и точността, на цифровите процеси може да липсва лекото, но познато усещане за „изпуснат ритъм“ и други естествени несъвършенства, които се генерират от човешките играчи. GrooVAE може да направи звук на барабанен клип и да се „почувства“ като изпълнение на човешки барабанист. Изследователите на Magenta премериха количествено 15 часа реални барабанисти, изпълняващи на барабанни комплекти MIDI, след което обучиха невронна мрежа за прогнозиране на ударите. Те използваха метод на предсказване, подобен на автоматичната система за превод на език на Google, като ударите и шарките на барабаните заемат мястото на думите и изразите. Изследователят и китаристът на Google Brain Джеси Енгел туитира, че ударът на GrooVAE е толкова човешки, че "почти ме трепва."

Magenta Studio също може да бъде полезен инструмент за музиканти, които искат да пробият креативни блокове. Инструментът „Продължи“ използва предсказващата сила на повтарящите се невронни мрежи (RNN), за да генерира до 32 мерки допълнителна музика след първоначалния удар на барабана или мелодията. Освен това процесът не само изпълнява прости предсказания на мелодията, но създава вариации по теми.

За напълно блокирани музиканти, които не са сигурни дори как да стартират, инструментът на Magenta Generate ще генерира фраза с четири ленти без въвеждане. Това се прави от Variational Autoencoder (VAE), обучен на милиони мелодии и ритми, който научи обобщено представяне на музикалните качества от данните.

Обединяването на различни музикални идеи е друго предизвикателство в композицията и производството на музика, а инструментът Interpolate на Magenta подпомага музикантите в това отношение. Като приема два барабана или две мелодии като вход, Interpolate създава клипове, които безпроблемно интегрират качества и от двата входа. VAE също играе важна роля тук, като позволява на Interpolate да определя музикални модели чрез картографиране на връзки между входовете и в крайна сметка да ги групира в компресиран MIDI профил.

Magenta Studio не е първият AI, който се занимава с създаването на музика. Американската певица Тарин Саузер използва Magenta, виртуален композитор AIVA, IBM Watson Beat и AI композитор и API Amper в албума си 2018 I I AI. Amper е друга компания за музикален софтуер, използваща AI за създаване на музика в различни жанрове и настроения.

Все по-голям брой стартиращи устройства, работещи с AI, вдигат шум в музикалната индустрия, докато техните нови техники за генериране на музика AI също имат комерсиални приложения във фоновата и филмова музика, саундтраци, видео игри и др. Като едно от пилотните приложения от Magenta на Google Проект, Magenta Studio представлява най-новото усилие на технологичните гиганти да проучат потенциала на AI в творческите изкуства.

Журналист: Fangyu Cai | Редактор: Майкъл Саразен

Отчетът за адаптивност на AI за обществена компания 2018 Fortune Global 500 е излязъл!
Закупете отчет във формат Kindle за Amazon.
Кандидатствайте за Партньорска програма на Insight, за да получите безплатен пълен PDF отчет.

Следвайте ни в Twitter @Synced_Global за ежедневните AI новини!

Знаем, че не искате да пропускате никакви истории. Абонирайте се за популярната ни Synced Global AI Weekly, за да получавате седмични актуализации на AI.

Вижте също

„Копаеш ги в пишката“Симфония на човечествотоНай-важните промени, които се случиха с менВсеки облак ...Какъв е продължителността на едно произведение на изкуството?Как каноничните режими на Ренесанса подобряват нашия UI Design.