Integracja dziedzictwa cyfrowego opery Kunqu i klasycznych ogrodów Suzhou

Senna wędrówka przez historię

Wyobraź sobie wejście do wiekowego chińskiego ogrodu, słysząc subtelny śpiew klasycznej opery podczas spaceru obok stawów i pawilonów, a to wszystko bez wychodzenia z salonu. W niniejszym badaniu zbadano, jak najnowocześniejsze obrazowanie 3D i wirtualna rzeczywistość mogą połączyć dwa słynne skarby chińskiej kultury — operę Kunqu i klasyczne ogrody Suzhou — tak aby współcześni odbiorcy mogli doświadczyć ich jako żywej całości, a nie oddzielnych eksponatów muzealnych.

Dlaczego miejsce ma znaczenie dla tradycji

Dziedzictwo kulturowe to coś więcej niż obiekty w szklanych gablotach czy nagrania w archiwum. Obejmuje zarówno fizyczne miejsca, takie jak zabytkowe budynki i ogrody, jak i żywe praktyki — muzykę, teatr czy rzemiosło. Organizacje międzynarodowe, takie jak UNESCO, podkreślają, że te dwie strony współzależne: występy nadają miejscom sens i życie, podczas gdy miejsca kształtują odbiór przedstawień. Tymczasem większość projektów cyfrowych je rozdziela — albo skanując budynki w 3D bez ludzi, albo rejestrując wykonawców w pustych studiach. Autorzy twierdzą, że taki podział szkodzi „duchowi miejsca”, utrudniając publiczności odczucie emocjonalnej i historycznej głębi tradycji.

Od skanów laserowych do żywych scen

Pierwsze próby cyfryzacji zabytków polegały na kosztownych skanerach laserowych, a później na fotogrametrii, która odtwarza kształty 3D z wielu zdjęć. Równocześnie popularne stały się kombinezony do rejestracji ruchu, używane do nagrywania tancerzy i aktorów oraz animowania postaci w środowiskach wirtualnych. Choć te narzędzia są potężne, mają ograniczenia: często zawodzą przy drobnych tkaninach, błyszczących powierzchniach, wodzie i realistycznych twarzach, a wytwarzane awatary bywają nieco sztuczne. Nowsza technika nazwana 3D Gaussian Splatting oferuje inną drogę, wykorzystując miliony drobnych kolorowych kropel do odtworzenia, jak światło rzeczywiście przemieszcza się w scenie. Badanie rozbudowuje tę metodę w czasie, tworząc „wolumetryczne wideo” prawdziwych wykonawców, po którym widzowie mogą poruszać się w trójwymiarowej przestrzeni.

Splatanie opery i ogrodu w jeden świat

Zespół wybrał dwa ikoniczne elementy kultury Suzhou: wpisany na listę światowego dziedzictwa Ogród Pokornego Administratora oraz klasyczną scenę opery Kunqu „Spacer po ogrodzie, przerwany sen” z Paawilonu Piękności (The Peony Pavilion). Najpierw zaprojektowali trasę spaceru przez ogród odpowiadającą punktom fabularnym sceny operowej, następnie pozyskali dane ogrodu za pomocą wielokamerowych zestawów, dronów i zaawansowanego przetwarzania usuwającego turystów z obrazów. W studiu wyposażonym w 81 kamer i zielone tło sfilmowano wykonawców Kunqu w pełnych kostiumach i przekształcono materiał w wideo wolumetryczne, używając zoptymalizowanej wersji Gaussian Splatting, która utrzymuje płynność ruchu i ostrość kostiumów. Odtworzenia ogrodu i żyjący aktorzy 3D zostały następnie połączone w systemie wirtualnej rzeczywistości zbudowanym w Unity, tworząc to, co autorzy nazywają Zintegrowanym Teatrem Cyfrowym.

Testowanie, jak ludzie rzeczywiście się w tym czują

Aby sprawdzić, czy podejście z integracją rzeczywiście ma znaczenie, badacze przeprowadzili dwie tury badań użytkowników z ochotnikami noszącymi gogle VR. W pierwszej uczestnicy doświadczyli tego samego fragmentu Kunqu na trzy sposoby: jako zwykłe płaskie wideo, jako scenę 3D zbudowaną z tradycyjnej fotogrametrii plus animowane postaci nagrane za pomocą motion capture oraz jako w pełni Gaussianową wersję ogrodu z wolumetrycznymi wykonawcami. Widzowie oceniali każdą wersję pod kątem zainteresowania, jakości wizualnej, immersji, zrozumienia, rezonansu emocjonalnego i motywacji do dalszego poznawania. Wersja oparta na Gaussanach zwyciężyła we wszystkich kategoriach. Uczestnicy opisali tradycyjną animację jako „marionetkową”, podczas gdy wolumetryczna śpiewaczka operowa wydawała się obecna, bogato szczegółowa i naturalnie osadzona w ogrodzie — wliczając drzewa, liście lotosu i odbicia na wodzie.

Gdy tło staje się opowieścią

Drugie eksperyment postawił bardziej konkretne pytanie: czy sam ogród jest istotny dla tego, jak ludzie rozumieją i cenią operę? Uczestnicy porównywali dwie wersje oparte na Gaussanach — jedną pokazującą tylko wykonawczynię Kunqu w pustej przestrzeni, drugą umieszczającą ją z powrotem w Ogrodzie Pokornego Administratora. Większość preferowała wersję zintegrowaną. Mówili, że to było jak „wejście do wnętrza ekranu”, wreszcie zobaczyć wyobrażony od dawna wiosenny ogród, który opisują teksty. Dla niektórych cyfrowe otoczenie przewyższało nawet wizytę na miejscu, unikając tłumów i hałasu przy jednoczesnym zachowaniu nastroju. Nieliczni woleli prostszą, scenopodobną wersję, obawiając się, że zbyt dużo scenerii może odwracać uwagę od śpiewu, ale byli w mniejszości.

Nowy sposób na zachowanie tradycji przy życiu

Mówiąc wprost, badanie pokazuje, że gdy tradycyjne przedstawienie i historyczne miejsce zostaną ponownie połączone w wirtualnym świecie o wysokiej wierności, ludzie nie tylko bardziej cenią doświadczenie, ale też głębiej rozumieją i dbają o kulturę. Zintegrowany Teatr Cyfrowy przekształca Kunqu w ogrodzie w wspólny, eksplorowalny „żywy dokument”, zamiast statycznego zapisu. Patrząc w przyszłość, autorzy widzą to podejście jako wzorzec dla ochrony wielu rodzajów dziedzictwa — łączenia rytuałów, muzyki czy rzemiosła z ulicami, dziedzińcami i krajobrazami, do których należą, i zapraszania globalnej publiczności do wędrówki po tych światach, jakby naprawdę tam była.

Cytowanie: Tian, F., Lu, Y., Tu, M. et al. Digital heritage integration of Kunqu opera and Suzhou classical gardens. npj Herit. Sci. 14, 78 (2026). https://doi.org/10.1038/s40494-026-02353-6

Słowa kluczowe: dziedzictwo wirtualnej rzeczywistości, opera Kunqu, klasyczne ogrody Suzhou, 3D Gaussian splatting, niematerialne dziedzictwo kulturowe