Yep It`s Not Nope

От джинглов к поп-музыке

Нарратив / Narrative, AI 28 Январь 2017
 (фото: )

Как искусственный интеллект «отжимает» шоу-бизнес, — Алекс Маршал для New York Times рассказывает об одном из новых многочисленных стартапов, использующих искусственный интеллект для создания музыки.

Лондон. Патрик Стоббс сидит в конференц-зале и, проигрывая песни со своего смартфона, рассказывает, что его стартап Jukedeck — в самом авангарде музыки. Звучит саундтрек к видеоигре восьмидесятых. «Такими мы были два года назад», — говорит он, слегка смущаясь.

«А вот что теперь», — продолжает он. Телефон проигрывает нежную фортепианную мелодию. Музыка здесь простая, далекая от утонченности в своей меланхолии, но, несомненно, она вполне сгодилась бы для рекламы, например, страховой компании.

Мистер Стоббс не писал эту музыку, равно как и не заказывал ее у композитора. Jukedeck — один из многочисленных стартапов, использующих искусственный интеллект для создания музыки. Используются нейронные сети, смоделированные по образу мозга, что позволяет машинам обучаться в процессе как детям. Музыканты подобных компаний пока что не боятся.

«Наша система еще в самом "детстве", она в самом начале обучения», — заявляет Стоббс, не забывая намекнуть, что надеется на прорыв Jukedeck в музыке: «Нет такого закона физики, который говорил бы, что компьютеры не могут стать лучше людей».

Идея заставить машины писать музыку не нова. В пятидесятых композитор Лейарен Хиллер использовал компьютер для написания сюиты Illiac для квартета струнных. Это был первый трек, написанный компьютером.

С той поры множество исследователей продвинулись на этой ниве. Нынешний тренд — сделать ИИ-музыку коммерчески прибыльной, используя ее во всех сферах – от мелодий для телефона до потенциальных поп-хитов. Например, Jukedeck предлагает приобрести свои треки всем, кому нужна фоновая музыка для видеоигр, роликов или рекламы. Компания просит у крупных компаний всего 21.99$ за использование трека, это малая доля того, во что обошлась бы работа музыканта. Мистер Стоббс не пожелал открыть, сколько треков уже продано, однако уточнил, что британское подразделение Coca-Cola оплачивает ежемесячную подписку.

Технические гиганты не отстают. В июне Google Brain анонсировали Magenta, проект, цель которого научить компьютеры создавать «захватывающую и творческую» музыку, полную сюрпризов. Однако пока что результат не соответствует заявленному.

 

В сентябре DeepMind, принадлежащая Google британская компания, занимающаяся искусственным интеллектом, продемонстрировала результаты эксперимента, проведенного развлечения ради. DeepMind загрузили образцы фортепианной музыки в систему WaveNet, используемую для генерирования аудио, такого как речь. Ничего не знающая о музыке система использовала предложенные треки для синтезирования десятисекундных клипов, звучавших как авангардный джаз. У IBM также есть исследовательский проект под названием Watson Beat, который позволит музыкантам изменять стиль игры, придавая песням, например, восточное звучание или добавляя «жути».

Истоки Jukedeck не совсем традиционны для технической компании. Мистер Стоббс и композитор Эд Ньютон-Рекс в возрасте 29 лет основали компанию в 2012 году. Оба пели в хоре школы King’s College в Лондоне, а затем Ньютон-Рекс отправился изучать музыку в Кембридж, где и услышал о том, что искусственный интеллект может писать музыку. После выпуска из университета друзья основали вокальную мужскую группу («ужасная затея», — говорит Стоббс), и даже пытались записать альбом. Однако в 2010 году Ньютон-Рекс посетил лекцию по компьютерным наукам в Гарварде, где училась его девушка. Лектор описывал программирование так просто, что Ньютон-Рекс вспомнил о своём интересе к ИИ-музыке. Он решил соединить эти вещи, и по пути домой он принял решение о создании Jukedeck.

Система Jukedeck включает загрузку сотен треков в искусственные нейронные сети. Компьютер анализирует их, чтобы разобраться в вероятности следования одной ноты за другой. В результате сети создают композиции в схожем стиле, которые специальная программа автоматически переводит в аудиоформат. Разные системы работают с разными стилями, от фолка до «корпоративного» — «вылизанная» электроника, обычно проигрываемая на бизнес-конференциях. Компания только недавно начала экспериментировать с выводом аудио через нейронные сети, раньше ИИ занимался только созданием трека. Это должно придать композициям более натуральное звучание, то есть, сделать их более человеческими.

Другие компании, занимающиеся музыкой искусственного интеллекта, склоняются к вовлечению музыкантов в процесс создания. Лаборатория компьютерных наук Sony в Париже, к примеру, считает музыкантов дополнением к своему проекту Flow Machines, получившему финансирование от Европейского совета по научным исследованиям.

Глава лаборатории, Франсуа Паше, считает ключевой задачей проекта научить компьютер писать поп-хиты. «Большинство из работающих с ИИ сосредоточены на классической музыке, но я всегда был уверен, что создание короткой захватывающей мелодии — самая сложная задача. Захватывающая песня — редкая и хрупкая вещь. Она получается, только если все компоненты срабатывают правильно: мелодия, гармония, голос, костюм исполнителя, дискурс вокруг хита вроде «почему вы написали эту песню». Пока никто не способен все это смоделировать, и это меня интригует».

 

Flow Machines устроен аналогично  Jukedeck. Компьютер занимается анализом музыкальных треков — всех, от Beatles до танцевальных хитов. Это позволяет машине учиться, а затем создавать свое. Однако результат его трудов передается музыкантам, которые могут совершенно бесплатно использовать его, изменить как угодно или просто отбросить. (Условия сейчас в процессе пересмотра с учетом обязательств по контрактам в тех случаях, если звукозаписывающие компании выпустят что-либо из этой музыки). Музыканты дают «чувство выбора», поясняет Паше: «Система не знает, зачем ей музыка. У систем нет ни целей, ни желаний».

По словам Паше, около двадцати коллективов уже воспользовались системой, некоторые исполняют песни, написанные компьютером, на концертах. Проводятся переговоры с некоторыми известными группами, например, с инди-группой Phoenix

 

Музыкантам, похоже, техника по душе. «Сам я никогда бы не написал такую песню», — говорит Мэтью Пондупен, французский рок-музыкант, выступающий под псевдонимом Lescop. — «Система завела меня в дебри, куда бы я сам никогда не добрался.» По его словам, это было похоже на работу с коллегой по группе, хотя он и проигнорировал большую часть предложений системы. «Но какой певец слушает советы своих коллег по группе?». 

И Паше, и Лескоп хором утверждают, что не верят, что слушатели когда-нибудь полностью перейдут на созданную компьютером музыку. «Фанатам нужно влюбляться в музыкантов, — считает Лескоп. — Невозможно влюбиться в компьютер».

Основатели Jukedeck не так категоричны.

Мистер Ньютон-Рекс считает, что искусственный интеллект может принципиально изменить подход к прослушиванию музыки, особенно если компьютер в конце концов «начнет понимать музыку достаточно, чтобы, скажем, реагировать в режиме реального времени на события в вашей игре или подстраиваться под пробежку. Записанная музыка прекрасна, но неизменна. Когда вы играете в игру, Ханс Циммер не сидит рядом с вами, создавая музыку. Я думаю, музыка будущего во многом будет строиться на системах ответного реагирования».

Ред.: Мы не могли не задаться вопросом, что же будет с Родиной и с нами и почему в продаже нет животного масла, а потому попросили прокомментировать прорывы искусственного интеллекта интеллект естественный.

Иван Шаповалов, музыкант и звукорежиссер:

Касательно музыки ИИ есть несколько не очень простых моментов. Первое — это, конечно же, анализ музыки, на основе которой должен обучаться ИИ. Как звукорежиссер, могу с уверенностью сказать, что на данный момент не существует алгоритмов, безошибочно «слышащих» полифонию (многоголосье). Всем известный Shazam и подобные всего лишь сравнивают форму волны с учетом очень незначительных помех-отклонений. Единственный знакомый мне алгоритм понимания многоголосья находится в пакете Celemony Melodyne и используется в профессиональных студиях. Но, к сожалению, Melodyne очень далек от качественной расшифровки простых многоголосых музыкальных фактур.

Можно сделать вывод — ИИ не может обучаться с помощью обычной в нашем понимании музыки, как минимум пока. Анализ и обучение ИИ возможно только на одноголосых или достаточно простых двух или трехголосых партиях. Такое обучение вряд ли рентабельно, так как не даст результата сравнимого даже с обычными программами автоаккомпанемента типа Band-in-a-Box.

Относительно Jukedeck — либо мы имеем дело с суперсекретным проектом по расшифровке полифонического музыкального материала либо автор пытается «впарить» простейший алгоритм, как-то понимающий теорию музыки и пишущий на основе классических понятий одноголосые мелодии, впоследствии обработанные тем же Band-in-a-Box или чем-то подобным, судя по характерным межсемпловым цифровым щелчкам в демо. Все эти возможности уже давно есть, испробованы и используются на уровне музыкально заинтересованного юзера.

Это муляж под видом секретного оружия. Jukedeck пытается сказать потенциальному заказчику — «Все эти музыканты и композиторы либо мошенники, "творят" с помощью подобных программ, либо берут слишком дорого. В любом случае — зачем вам эти посредники?».

Да, с первого взгляда и прослушивания демо немузыкант может быть доволен результатом работы сервиса, но платить за такое вряд ли будут многие. На данный момет основные клиенты сервиса — люди, снимающие любительское видео и по каким-то причинам не покупающие музыку на аудиостоках. Основные аудиостоки значительно повысили цены, и автор Jukedeck, вероятно, увидел нишу. Но основная тенденция хоумвидео, свадебщиков и подобных — воровство музыки, так что, возможно, Jukedeck состоится не так в музыкальном смысле, как в воспитательном 

голосов

Вы должны быть зарегистрированы, чтобы комментировать статьи и отправлять сообщения непосредственно редакции. Пожалуйста, войдите или создайте бесплатную учетную запись пользователя.