Музыка и ИИ

Portrait XO — WIRE

Допеть за свою вторую версию

CJ Carr из Dadabots обучает SampleRNN часу её пения — десять часов генераций становятся альбомом WIRE, 9 декабря 2022 года.

Portrait XO — WIRE
Изображение с официальной страницы проекта

У WIRE точная рабочая ситуация: певица слышит собственный голос, который поёт что-то почти понятное, и дописывает за него мысль. Portrait XO называет это нейронным вокальным дуэтом. CJ Carr из Dadabots обучил SampleRNN на одном часе её пения — обучение заняло около двух с половиной дней на GPU NVIDIA V100, — и получил примерно десять часов нового звука. Песни из этого материала она написала, записала и спродюсировала сама; сведение и мастеринг сделал Michele Balduzzi.

Альбом вышел 9 декабря 2022 года на Sound Obsessed как ончейн-релиз винила: пластинки распространяет Deepgrooves, доставка была обещана на весну 2023-го, стриминг идёт на Audius. Главный крючок родился прямо из генерации: модель выдала фразу sittin on a, Portrait XO дополнила её словом wire — и называет это моментом мурашек, потому что голос звучал как её собственный, но с приёмами, которые она сама не воспроизводит. Рядом стоит Jung: трек вырос из сгенерированного «ee jung» — «привязанность» по-корейски, «молодость» по-немецки.

Игра в пропуски

Модель не умела петь целые фразы, поэтому сочинение превратилось, по словам Portrait XO, в игру «заполни пропуск»: у обрывка есть направление, но нет смысла, и его приходится достраивать. Отсюда и определение альбома как совместной работы 50/50: машине — сырьё, человеку — выбор и доводка. Бонус-трек Vessel сделан с Резаром на открытых моделях, сливающих два голоса в один; этот приём хвалила Имоджен Хип на AI Song Contest 2021 года.

«Не думаю, что ИИ обладает сознанием, — говорит Portrait XO, — но, возможно, он способен сделать более сознательными нас». Пожалуй, это лучшая формула для всей затеи.

Источники и музыка

  1. Portrait XO — WIRE
Музыка и ИИ — все материалы