Интеграция цифрового наследия: опера куньцю и классические сады Сучжоу

Сновидческая прогулка сквозь историю

Представьте, что вы шагаете по многовековому китайскому саду, слыша тонкое пение классической оперы, проходя мимо прудов и павильонов — и всё это, не выходя из своей гостиной. В этом исследовании рассматривается, как передовые 3D‑технологии и виртуальная реальность могут объединить два знаменитых сокровища китайской культуры — оперу куньцю и классические сады Сучжоу — чтобы современные зрители могли воспринимать их как живое целое, а не как разрозненные музейные экспонаты.

Почему место важно для традиции

Культурное наследие — это не только предметы в витринах или записи в архивах. Оно включает и материальные объекты, такие как исторические здания и сады, и живые практики — музыку, театр, ремёсла. Международные организации, в том числе ЮНЕСКО, подчёркивают, что эти два аспекта зависят друг от друга: представления придают смысл и жизнь местам, а места формируют понимание представлений. Тем не менее большинство цифровых проектов разрывают эту связь — либо сканируют здания в 3D без людей, либо записывают исполнителей в пустых студиях. Авторы утверждают, что такой разрыв вредит «духу места», затрудняя у аудитории ощущение эмоциональной и исторической глубины традиции.

От лазерных сканов к живым сценам

Ранние попытки оцифровки исторических объектов опирались на дорогие лазерные сканеры, позже — на фотограмметрию, реконструирующую 3D‑формы по множеству фотографий. Одновременно получили распространение системы захвата движения для записи танцоров и актёров, управляя анимированными персонажами в виртуальной среде. Хотя эти инструменты мощны, у них есть ограничения: они часто испытывают трудности с тонкими тканями, блестящими поверхностями, водой и реалистичными лицами и склонны создавать аватаров, которые выглядят слегка искусственными. Новая техника, называемая 3D‑гауссовским сплаттингом, предлагает иной путь: она использует миллионы крошечных цветных «капель» для воссоздания того, как свет действительно проходит через сцену. В этом исследовании метод был развёрнут во временной плоскости для создания «объёмного видео» реальных исполнителей, вокруг которых зрители могут свободно ходить в 3D.

Слияние оперы и сада в единый мир

Команда выбрала два культурных символа Сучжоу: включённый в список объектов Всемирного наследия Сад Скромного администратора и классическую сцену куньцю «Прогулка по саду, прерванный сон» из Павлиний павильон. Сначала они разработали маршрут прогулки по саду, соответствующий сюжетным переломам оперной сцены, затем зафиксировали сад с помощью многокамерных установок, дронов и продвинутой обработки для удаления туристов с изображений. В студии с 81 камерой и хромакеем сняли исполнителей куньцю в полном костюме и преобразовали записи в объёмное видео, используя оптимизированную версию гауссовского сплаттинга, которая сохраняет плавность движения и чёткость костюмов. Эти реконструкции сада и живые 3D‑актеры были объединены в систему виртуальной реальности, созданную в Unity, формируя то, что авторы называют Интегрированным цифровым театром.

Проверка реальных чувств участников

Чтобы выяснить, действительно ли такой интегрированный подход важен, исследователи провели два раунда пользовательских испытаний с добровольцами в VR‑шлемах. В первом участники знакомились с одной и той же выдержкой куньцю тремя способами: как обычное плоское видео, как 3D‑сцена, созданная традиционной фотограмметрией с анимированными персонажами, записанными посредством захвата движения, и как полностью основанная на гауссовском сплаттинге версия сада с объёмными исполнителями. Зрители оценивали каждую версию по интересу, визуальному качеству, погружению, пониманию, эмоциональному отклику и мотивации узнать больше. Версия на основе гауссовского сплаттинга оказалась лучшей по всем показателям. Люди описывали традиционную анимацию как «марионеточную», тогда как объёмный оперный певец казался присутствующим, богато детализированным и естественно вписанным в сад — до деревьев, листьев лотоса и отражений на воде.

Когда фон становится сюжетом

Во втором эксперименте задавался более конкретный вопрос: важен ли сам сад для того, как люди понимают и ценят оперу? Участники сравнивали две версии на основе гауссовского сплаттинга — одну, показывающую только исполнителя куньцю в пустом пространстве, и другую, возвращающую её в Сад Скромного администратора. Большинство предпочло интегрированную версию. Они говорили, что это похоже на «вход внутрь экрана», наконец увидев воображаемый весенний сад, о котором поют в текстах. Для некоторых цифровая сцена даже превзошла посещение на месте: она избавляла от толпы и шума, сохраняя при этом атмосферу. Немногие отдали предпочтение более простой сцене, опасаясь, что избыточный антураж может отвлекать от пения, но они были в меньшинстве.

Новый способ сохранять традиции

Проще говоря, исследование показывает: когда традиционное представление и историческое пространство воссоединяются в виртуальном мире с высокой точностью, люди не только получают большее удовольствие от опыта, но и глубже понимают и ценят культуру. Интегрированный цифровой театр превращает куньцю в саду в общее, исследуемое «живое свидетельство», а не в статичный архивный документ. Взгляд в будущее: авторы видят этот подход как шаблон для сохранения многих видов наследия — связывая ритуалы, музыку и ремёсла с улицами, дворами и ландшафтами, к которым они принадлежат, и приглашая мировую аудиторию бродить по этим мирам, как будто она находится там на самом деле.

Цитирование: Tian, F., Lu, Y., Tu, M. et al. Digital heritage integration of Kunqu opera and Suzhou classical gardens. npj Herit. Sci. 14, 78 (2026). https://doi.org/10.1038/s40494-026-02353-6

Ключевые слова: виртуальная реальность наследие, опера куньцю, классические сады Сучжоу, 3D гауссовское сплаттинг, нематериальное культурное наследие