Digital integrering av kulturarv: Kunqu-opera och Suzhous klassiska trädgårdar

En drömlik promenad genom historien

Föreställ dig att kliva in i en flera hundra år gammal kinesisk trädgård, höra den finstämda sången från klassisk opera medan du promenerar förbi dammar och paviljonger — utan att lämna ditt vardagsrum. Denna studie undersöker hur toppmodern 3D-avbildning och virtuell verklighet kan föra samman två kända skatter i kinesisk kultur — Kunqu-opera och Suzhous klassiska trädgårdar — så att dagens publik kan uppleva dem som en levande helhet snarare än som separata museumföremål.

Varför plats betyder något för traditionen

Kulturarv är mer än föremål i glasmontrar eller inspelningar i ett arkiv. Det innefattar både fysiska miljöer, såsom historiska byggnader och trädgårdar, och levande praktiker som musik, teater och hantverk. Internationella organ som UNESCO betonar att dessa två sidor är beroende av varandra: föreställningar ger mening och liv åt platser, medan platser formar hur föreställningar förstås. Ändå delar de flesta digitala projekt upp dem — antingen genom att skanna byggnader i 3D utan människor eller genom att spela in utövare i tomma studior. Författarna menar att denna uppdelning skadar ”platsens anda” och försvårar för publiken att känna traditionens känslomässiga och historiska djup.

Från laserskanningar till levande scener

Tidiga försök att digitalisera historiska miljöer förlitade sig på dyra laserskannrar och senare på fotogrammetri, som återbygger 3D-former från många fotografier. Samtidigt blev rörelsefångstdräkter populära för att spela in dansare och skådespelare, vilket drev animerade karaktärer i virtuella miljöer. Trots sin styrka har dessa verktyg begränsningar: de har ofta svårt med tunna tyger, blanka ytor, vatten och realistiska ansikten, och de tenderar att producera avatarer som känns något artificiella. En nyare teknik kallad 3D Gaussian Splatting erbjuder en annan väg genom att använda miljontals små, färgade kluttar för att återskapa hur ljuset faktiskt rör sig genom en scen. Denna studie bygger vidare på den metoden och utvidgar den över tid för att skapa ”volymetrisk video” av verkliga utövare som åskådare kan gå runt i i 3D.

Väva ihop opera och trädgård till en värld

Teamet valde två kulturella ikoner från Suzhou: den världsarvslistade Trädgården för den ödmjuke förvaltaren (Humble Administrator’s Garden) och en klassisk Kunqu-scen, ”En promenad i trädgården, en avbruten dröm” ur The Peony Pavilion. De designade först en gångväg genom trädgården som matchar operascenens berättarmoment, och fångade sedan trädgården med multikamera-riggar, drönare och avancerad bearbetning för att ta bort turister från bilderna. I en studio utrustad med 81 kameror och green screens filmade de Kunqu-utövare i full kostym och omvandlade materialet till volymetrisk video med en optimerad version av Gaussian Splatting som bevarar smidig rörelse och skarpa kostymer. Dessa trädgårdsrekonstruktioner och levande 3D-skådespelare fördes därefter samman i ett VR-system byggt i Unity, vilket bildade det författarna kallar Integrated Digital Theater.

Testa hur människor faktiskt känner inuti

För att se om detta integrerade tillvägagångssätt verkligen spelar roll genomförde forskarna två omgångar användarstudier med frivilliga som bar VR-headset. I den första upplevde deltagarna samma Kunqu-excerpt på tre sätt: som vanlig platt video, som en 3D-scen byggd från traditionell fotogrammetri plus animerade motion-capture-karaktärer, och som en helt Gaussian-baserad trädgård med volymetriska utövare. Åskådare betygsatte varje version på intresse, visuell kvalitet, närvaro (immersion), förståelse, känslomässig resonans och motivation att vilja lära sig mer. Den Gaussian-baserade versionen kom ut i topp på alla mått. Människor beskrev den traditionella animationen som ”marionett‑liknande”, medan den volymetriska operasångaren kändes närvarande, rikt detaljerad och naturligt inbäddad i trädgården, ända ner till träden, lotusbladen och reflektionerna i vattnet.

När bakgrunden blir berättelse

Den andra experimentet ställde en mer spetsig fråga: är trädgården i sig avgörande för hur människor förstår och värderar operan? Deltagarna jämförde två Gaussian-baserade versioner — en som visade endast Kunqu‑utövaren i tomma rymden, och en som placerade henne tillbaka i Trädgården för den ödmjuke förvaltaren. Flertalet föredrog den integrerade versionen. De sa att det kändes som att ”stiga in i skärmen” och äntligen se den långfantiserade vårträdgård som texterna beskriver. För vissa överträffade den digitala miljön till och med ett besök på plats, genom att undvika folkmassor och buller samtidigt som stämningen bevarades. Några få åskådare föredrog den enklare, scenliknande versionen och oroade sig över att för mycket scenografi kunde distrahera från sången, men de var i minoritet.

Ett nytt sätt att hålla traditioner vid liv

Enkelt uttryckt visar studien att när traditionell föreställning och historisk miljö återförenas i en högfidelitets virtuell värld, så njuter människor inte bara mer av upplevelsen utan förstår och bryr sig också djupare om kulturen. Integrated Digital Theater förvandlar Kunqu i trädgården till ett delat, utforskningsbart ”levande dokument” snarare än ett statiskt register. Framöver ser författarna detta tillvägagångssätt som en modell för att skydda många slags kulturarv — att länka riter, musik eller hantverk tillbaka till gatorna, innergårdarna och landskapen där de hör hemma, och bjuda in en global publik att vandra genom dessa världar som om de verkligen var där.

Citering: Tian, F., Lu, Y., Tu, M. et al. Digital heritage integration of Kunqu opera and Suzhou classical gardens. npj Herit. Sci. 14, 78 (2026). https://doi.org/10.1038/s40494-026-02353-6

Nyckelord: virtuellt verklighetsarv, Kunqu-opera, Suzhous klassiska trädgårdar, 3D Gaussian splatting, immateriellt kulturarv