Clear Sky Science · nl

Integratie van digitaal erfgoed van Kunqu‑opera en de klassieke tuinen van Suzhou

· Terug naar het overzicht

Een droomachtige wandeling door de geschiedenis

Stel je voor dat je een eeuwenoude Chinese tuin binnenstapt, het fijne gezang van klassieke opera hoort terwijl je langs vijvers en paviljoens wandelt, zonder je woonkamer te verlaten. Deze studie onderzoekt hoe geavanceerde 3D‑beeldvorming en virtual reality twee beroemde schatten van de Chinese cultuur — Kunqu‑opera en de klassieke tuinen van Suzhou — kunnen samenbrengen, zodat mensen ze vandaag als een levend geheel kunnen ervaren in plaats van als gescheiden museumstukken.

Figure 1
Figure 1.

Waarom plaats van belang is voor traditie

Cultureel erfgoed is meer dan objecten in glazen kasten of opnamen in een archief. Het omvat zowel fysieke omgevingen, zoals historische gebouwen en tuinen, als levende praktijken zoals muziek, theater en ambachten. Internationale instanties zoals UNESCO benadrukken dat deze twee kanten van elkaar afhankelijk zijn: uitvoeringen geven betekenis en leven aan plaatsen, terwijl plaatsen bepalen hoe uitvoeringen worden begrepen. Toch scheiden de meeste digitale projecten ze — of ze scannen gebouwen in 3D zonder mensen, of ze leggen uitvoerders vast in lege studio’s. De auteurs betogen dat deze scheiding de “geest van de plaats” schaadt, waardoor het voor het publiek moeilijker wordt de emotionele en historische diepgang van een traditie te voelen.

Van laserscans naar levende scenes

Vroege pogingen om historische locaties te digitaliseren vertrouwden op dure laserscanners en later op fotogrammetrie, die 3D‑vormen herbouwt uit vele foto’s. Tegelijk werden motion‑capture pakken populair om dansers en acteurs vast te leggen en geanimeerde personages in virtuele omgevingen aan te sturen. Hoewel krachtig, kennen deze hulpmiddelen beperkingen: ze hebben vaak moeite met fijne stoffen, glanzende oppervlakken, water en realistische gezichten, en neigen ertoe avatars te produceren die enigszins kunstmatig aanvoelen. Een nieuwere techniek, 3D Gaussian Splatting, biedt een ander pad: miljoenen kleine gekleurde vlekken recreëren hoe licht door een scene beweegt. Deze studie bouwt voort op die methode en breidt haar in de tijd uit om ‘volumetrische video’ van echte uitvoerders te creëren waarin kijkers rond kunnen lopen in 3D.

Opera en tuin weven tot één wereld

Het team koos twee culturele iconen uit Suzhou: de op de Werelderfgoedlijst staande Tuin van de Bescheiden Beheerder en een klassieke Kunqu‑operascène, “Een wandeling in de tuin, een onderbroken droom,” uit De Pioenpaviljoen. Ze ontwierpen eerst een looproute door de tuin die overeenkomt met de verhaalmomenten van de operascène, en legden daarna de tuin vast met multi‑camera rigs, drones en geavanceerde verwerking om toeristen uit de beelden te verwijderen. In een studio uitgerust met 81 camera’s en green screens filmden ze Kunqu‑uitvoerders in volledige kostuums en zetten het materiaal om in volumetrische video met een geoptimaliseerde versie van Gaussian Splatting die beweging vloeiend houdt en kostuums scherp weergeeft. Deze tuinreconstructies en levende 3D‑acteurs werden vervolgens samengebracht in een virtual reality‑systeem gebouwd in Unity, wat de auteurs een Geïntegreerd Digitaal Theater noemen.

Figure 2
Figure 2.

Testen hoe mensen zich er echt in voelen

Om te onderzoeken of deze geïntegreerde aanpak echt verschil maakt, voerden de onderzoekers twee ronden gebruikersonderzoek uit met vrijwilligers die VR‑headsets droegen. In de eerste versie ervoeren deelnemers hetzelfde Kunqu‑fragment op drie manieren: als gewone vlakke video, als een 3D‑scene opgebouwd uit traditionele fotogrammetrie plus geanimeerde motion‑capture‑personages, en als een volledig Gaussian‑gebaseerde tuin met volumetrische uitvoerders. Kijkers beoordeelden elke versie op interesse, visuele kwaliteit, immersie, begrip, emotionele resonantie en motivatie om meer te leren. De Gaussian‑versie kwam op alle aspecten als beste uit de bus. Mensen beschreven de traditionele animatie als “marionetachtig,” terwijl de volumetrische operazangeres aanwezig, rijk aan detail en natuurlijk ingebed in de tuin voelde, tot de bomen, lotusbladeren en reflecties in het water aan toe.

Wanneer achtergrond verhaal wordt

Het tweede experiment stelde een scherpere vraag: is de tuin zelf essentieel voor hoe mensen de opera begrijpen en waarderen? Deelnemers vergeleken twee Gaussian‑versies — één die alleen de Kunqu‑uitvoerder in lege ruimte toonde, en de andere die haar terugplaatste in de Tuin van de Bescheiden Beheerder. De meesten gaven de voorkeur aan de geïntegreerde versie. Ze zeiden dat het voelde als “stappen binnen het scherm,” en eindelijk de langverbeelde lentetuin te zien die de songteksten beschrijven. Voor sommigen overtrof de digitale setting zelfs een bezoek ter plaatse: het vermeed drukte en lawaai terwijl de sfeer behouden bleef. Een enkeling gaf de voorkeur aan de eenvoudigere, podiumachtige versie uit bezorgdheid dat te veel decor afleiden van het zingen, maar zij waren in de minderheid.

Een nieuwe manier om tradities levend te houden

Simpel gezegd laat de studie zien dat wanneer traditionele uitvoering en historische setting worden herenigd in een hoog‑fideliteits virtuele wereld, mensen niet alleen meer van de ervaring genieten maar ook dieper begrip en betrokkenheid bij de cultuur ontwikkelen. Het Geïntegreerde Digitale Theater verandert Kunqu in de tuin in een gedeeld, verkenbaar “levend document” in plaats van een statisch archiefstuk. Vooruitkijkend zien de auteurs deze aanpak als een blauwdruk voor het veiligstellen van vele vormen van erfgoed — rituelen, muziek of ambachten terugkoppelen naar de straten, binnenplaatsen en landschappen waar ze thuishoren, en een globaal publiek uitnodigen om door die werelden te dwalen alsof ze er echt zijn.

Bronvermelding: Tian, F., Lu, Y., Tu, M. et al. Digital heritage integration of Kunqu opera and Suzhou classical gardens. npj Herit. Sci. 14, 78 (2026). https://doi.org/10.1038/s40494-026-02353-6

Trefwoorden: virtueel‑reality erfgoed, Kunqu‑opera, klassieke tuinen van Suzhou, 3D Gaussian splatting, immaterieel cultureel erfgoed