24 сентября 2021 года.
Когда Людвиг фон Бетховен умер в 1827 году, он был в трех годах от завершения Девятой симфонии — произведения, которое многие называют его magnum opus. Он начал работу над Десятой симфонией, но из-за ухудшения здоровья не смог добиться значительных успехов: Все, что он оставил после себя, — это несколько музыкальных набросков.
С тех пор поклонники Бетховена и музыковеды ломают голову и сокрушаются о том, что могло бы быть. Его ноты намекали на некую великолепную награду, хотя и казались недостижимыми.
Теперь, благодаря работе команды историков музыки, музыковедов, композиторов и компьютерных ученых, замысел Бетховена воплотится в жизнь.
Я руководил искусственным интеллектом в проекте, возглавляя группу ученых из творческого ИИ-стартапа Playform AI, которые обучали машину всему творчеству Бетховена и его творческому процессу.
Полная запись 10-й симфонии Бетховена будет выпущена 9 октября 2021 года, в тот же день, когда состоится мировая премьера в Бонне, Германия, — кульминация двухлетней работы.
Прошлые попытки натолкнулись на стену
Около 1817 года Королевское филармоническое общество в Лондоне заказало Бетховену Девятую и Десятую симфонии. Симфонии, написанные для оркестра, часто состоят из четырех частей: первая исполняется в быстром темпе, вторая — в медленном, третья — в среднем или быстром, а последняя — в быстром темпе.
Бетховен закончил Девятую симфонию в 1824 году, которая завершается вечной «Одой к радости».
Но когда дело дошло до 10-й симфонии, Бетховен не оставил после себя ничего, кроме нот и нескольких идей, которые он записал.
В прошлом предпринимались попытки реконструировать части 10-й симфонии Бетховена. Самая известная из них — в 1988 году музыковед Барри Купер рискнул завершить первую и вторую части. Он соединил 250 тактов музыки из набросков, чтобы создать, по его мнению, постановку первой части, которая была верна видению Бетховена.
Однако скудость бетховенских набросков не позволила специалистам по симфонии выйти за пределы первой части.
Сбор команды
В начале 2019 года со мной связался доктор Маттиас Рёдер, директор Института Караяна, организации в Зальцбурге (Австрия), которая занимается продвижением музыкальных технологий. Он объяснил, что собирает команду для завершения 10-й симфонии Бетховена в честь 250-летия композитора. Зная о моей работе над искусством, создаваемым ИИ, он хотел узнать, сможет ли ИИ помочь заполнить пробелы, оставленные Бетховеном.
Задача казалась сложной. Чтобы справиться с ней, ИИ должен был сделать то, чего он никогда раньше не делал. Но я сказал, что попробую.
Затем Рёдер собрал команду, в которую вошел австрийский композитор Вальтер Верзова. Верзове, известному тем, что он написал фирменную песенку Intel для кальяна, было поручено создать новую композицию, которая объединит то, что оставил Бетховен, с тем, что создаст ИИ. Марк Готэм, специалист по вычислительной музыке, возглавил работу по расшифровке набросков Бетховена и обработке всего его творчества, чтобы ИИ мог пройти соответствующее обучение.
В команду также вошел Роберт Левин, музыковед из Гарвардского университета, который, к тому же, является потрясающим пианистом. Левин ранее закончил ряд неоконченных произведений XVIII века Моцарта и Иоганна Себастьяна Баха.
Проект обретает форму
В июне 2019 года группа собралась на двухдневный семинар в музыкальной библиотеке Гарварда. В большой комнате с фортепиано, доской и стопкой эскизов Бетховена, охватывающих большинство известных произведений, мы говорили о том, как фрагменты можно превратить в законченное музыкальное произведение и как искусственный интеллект может помочь решить эту головоломку, сохраняя при этом верность процессу и видению Бетховена.
Эксперты по музыке в зале с нетерпением ждали возможности узнать больше о том, какую музыку ИИ создавал в прошлом. Я рассказал им, как ИИ успешно генерировал музыку в стиле Баха. Однако это была лишь гармонизация введенной мелодии, которая звучала как Бах. Это и близко не подходило к тому, что нам нужно было сделать: создать целую симфонию из нескольких фраз.
Тем временем ученые в комнате — и я в том числе — хотели узнать, какие материалы имеются в наличии и как эксперты собираются использовать их для завершения симфонии.
В итоге задача выкристаллизовалась. Нам нужно было использовать ноты и завершенные композиции из всего творчества Бетховена — вместе с имеющимися набросками 10-й симфонии — чтобы создать нечто, что мог бы написать сам Бетховен.
Это был огромный вызов. У нас не было машины, которой можно было бы передать эскизы, нажать кнопку и она бы выплюнула симфонию. Большинство доступных на тот момент ИИ не могли продолжить незавершенное музыкальное произведение дольше нескольких дополнительных секунд.
Мы должны расширить границы возможностей творческого ИИ, обучив машину творческому процессу Бетховена — как он брал несколько тактов музыки и кропотливо развивал их в захватывающие симфонии, квартеты и сонаты.
Творческий процесс Бетховена по кусочкам
По мере реализации проекта человеческая и машинная стороны сотрудничества развивались. Верзова, Готэм, Левин и Рёдер расшифровывали и переписывали наброски к 10-й симфонии, пытаясь понять намерения Бетховена. Используя его завершенные симфонии в качестве шаблона, они пытались собрать воедино головоломку того, куда должны быть помещены фрагменты набросков — в какую часть, в какую часть.
Им приходилось принимать решения, например, определять, указывает ли эскиз на начало скерцо — очень оживленной части симфонии, обычно находящейся в третьей части. Или они могли определить, что музыкальная линия, скорее всего, является основой фуги, которая представляет собой мелодию, созданную путем переплетения частей, повторяющих центральную тему.
ИИ — моя часть проекта — столкнулся с рядом сложных задач.
Во-первых, и это самое главное, нам нужно было понять, как взять короткую фразу или даже просто мотив и использовать его для создания более длинной и сложной музыкальной структуры, как это сделал бы Бетховен. Например, машина должна была узнать, как Бетховен построил Пятую симфонию из базового четырехнотного мотива.
Далее, поскольку продолжение фразы также должно следовать определенной музыкальной форме, будь то скерцо, трио или фуга, ИИ необходимо было изучить процесс разработки этих форм Бетховеном.
Список дел рос: Мы должны были научить ИИ брать мелодическую линию и гармонизировать ее. ИИ нужно было научиться соединять два музыкальных фрагмента. И мы поняли, что ИИ должен уметь сочинять коду — фрагмент, завершающий часть музыкального произведения.
Наконец, когда у нас была полная композиция, ИИ должен был понять, как ее оркестровать, то есть назначить разные инструменты для разных партий.
И он должен был справиться с этими задачами так, как это мог бы сделать Бетховен.
Прохождение первого большого испытания
В ноябре 2019 года команда снова встретилась лично — на этот раз в Бонне, в доме-музее Бетховена, где родился и вырос композитор.
Эта встреча стала лакмусовой бумажкой для определения того, сможет ли ИИ завершить этот проект. Мы распечатали музыкальные партитуры, разработанные ИИ и созданные на основе эскизов 10-й части Бетховена. Пианист выступил в небольшом концертном зале музея перед группой журналистов, музыковедов и экспертов по Бетховену.
Мы попросили зрителей определить, где заканчиваются фразы Бетховена и где начинается экстраполяция ИИ. Они не смогли.
Через несколько дней одна из этих сгенерированных ИИ партитур была сыграна струнным квартетом на пресс-конференции. Только те, кто досконально знал наброски Бетховена к 10-й симфонии, могли определить, когда появились партии, сгенерированные ИИ.
Успех этих тестов говорил о том, что мы на верном пути. Но это были всего лишь несколько минут музыки. Предстояло еще много работы.
Готовность к миру
В каждый момент времени гений Бетховена нависал над нами, требуя совершенствования. По мере развития проекта развивался и ИИ. За 18 месяцев мы создали и оркестровали две целые части продолжительностью более 20 минут каждая.
Мы ожидаем, что эта работа вызовет определенную реакцию со стороны тех, кто скажет, что искусство должно быть недоступно для ИИ и что ИИ не имеет права пытаться повторить творческий процесс человека. Однако когда речь идет об искусстве, я рассматриваю ИИ не как замену, а как инструмент, который открывает художникам двери для нового самовыражения.
Этот проект был бы невозможен без помощи историков и музыкантов. Для достижения этой цели потребовалось огромное количество работы — и, да, творческого мышления.
В какой-то момент один из музыкальных экспертов команды сказал, что ИИ напоминает ему нетерпеливого ученика, который каждый день занимается музыкой, учится и становится все лучше и лучше.
Теперь этот ученик, приняв эстафету от Бетховена, готов представить миру 10-ю симфонию.
Автор — Ахмед Эльгаммаль, профессор, директор лаборатории Art & AI Lab, Ратгерский университет.
