«Мандрагора»: как реконструировать оперу Чайковского с помощью нейросетей
Кейс Сбера, Sber Immersive и СберМаркетинга.
На днях стали известны итоги международной премии событийного маркетинга и интегрированных коммуникаций Bema. Кейс Сбера, Sber Immersive и СберМаркетинга «Опера «Мандрагора» в Мариинском театре» получил сразу две награды: золото в номинации «Лучшая режиссура и постановка мероприятия» и серебро в номинации «Лучший культурный/просветительский проект».
Подробностями реализации проекта поделились участники кейса — эксперты Sber Immersive и Центра технологий СберМаркетинга.
Решение: как создавалась опера «Мандрагора»
Для достижения поставленных целей команда проекта применила комплексный междисциплинарный подход, сочетающий традиционное мастерство сочинения музыки и сценографии с передовыми технологиями. Новаторский характер решения заключается в том, что искусственный интеллект выступил не только как инструмент, а как полноправный соавтор практически на каждом ключевом этапе создания оперы.
Музыкальное сочинение с использованием ИИ
Нейросетевые модели Сбера — ГигаЧат и Symformer — проанализировали сохранившиеся материалы Чайковского и Рачинского, чтобы воссоздать либретто и предложить варианты развития музыкальных тем. Композитор Петр Дранга выступил художественным руководителем процесса: курируя генерацию, он отбирал наиболее удачные фрагменты и вручную дописывал музыку и текст, обеспечивая целостность и соответствие духу оригинального замысла.
Масштабная сценография
Центральным сценографическим образом стала десятиметровая механическая голова — ее вырезали из пенопласта на 3D-фрезе, затем слой за слоем обрабатывали и красили. Серый цвет был выбран намеренно для последующего 3D-мэппинга. Голова представляла собой сложную инженерную конструкцию, которая могла поворачиваться на 360 градусов и состояла из трех этажей для артистов. Она стала универсальным элементом декорации, внутри и вокруг которой с помощью мощного видеомэппинга разворачивались фантастические миры. Постановка задействовала все возможности механизированного планшета сцены Мариинки — подвижные платформы и накладной поворотный круг.
Другие визуальные компоненты на базе ИИ
Модели ГигаЧат и Kandinsky также помогли создать концепции костюмов и аксессуаров, предлагая дизайнерам нестандартные идеи и визуальные решения, которые затем дорабатывались и воплощались в жизнь. Благодаря этому постановка получила уникальный и современный визуальный язык повествования.
В результате было создано более 120 костюмов для солистов, хора, миманса и балета, каждый из которых раскрывал символику оперы: от чистоты и невинности до мистики и жертвенности. Для их изготовления использовались разнообразные материалы: полиэстер, жаккард, бархат, тафта, жатка, а также элементы ручной вышивки, искусственные растения и аксессуары, что позволило добиться необычного художественного результата.
Максим Козлов, руководитель Sber Immersive: «Проект «Мандрагора» — синтез классического искусства и современных технологий, реализованный впервые в таком масштабе на крупной сцене. Он демонстрирует новые возможности использования искусственного интеллекта в создании сценических произведений, расширяет границы традиционного театра и задает новые стандарты междисциплинарного творчества. Такой опыт ранее практически не реализовывался в мировой практике оперного искусства из-за технической сложности воплощения замысла, и мы рады, что этот инновационный подход был смело применен в Мариинском театре и нашел отклик в сердцах многомиллионной аудитории».
