Multimodale Interaktionsverbesserung für digitale Kulturerbe‑Systeme: Nutzerverhaltensanalyse und Interface‑Rekonstruktion der Erfassungsbibliothek des Palastmuseums

Die Verbotene Stadt auf Ihren Bildschirm bringen

Das Palastmuseum in Peking, Heimat der Schätze der Verbotenen Stadt, hat enorme Anstrengungen unternommen, seine Kunstwerke und Artefakte zu digitalisieren. Besucher überall auf der Welt können jetzt in feinste Details zoomen, für die früher Lupe und ein besonderer Besuch nötig waren. Dennoch brechen viele Nutzer bereits nach wenigen Minuten ab: Sie sind von den Bildern beeindruckt, wissen aber nicht, was sie wirklich gelernt haben. Diese Studie stellt eine einfache Frage mit weitreichenden Folgen: Wie lässt sich ein digitales Museum so neu gestalten, dass gewöhnliche Besucher — nicht nur Expertinnen und Experten — die hinter den Bildern stehende Kultur tatsächlich fühlen und verstehen?

Von gestochen scharfen Bildern zu oberflächlichem Verständnis

Die Forschenden beginnen mit der Feststellung eines zentralen Spannungsfeldes vieler digitaler Kulturerbe‑Projekte. Hochpräzise Scans und 3D‑Modelle erfassen jeden Riss in einer Keramikglasur oder jeden Pinselstrich in einer Rollmalerei. Doch die Online‑Systeme, die diese Wunder zeigen, behandeln Nutzerinnen und Nutzer häufig als passive Betrachter. Die Interaktion beschränkt sich meist auf Drehen, Zoomen und Durchscrollen langer, technischer Beschreibungen. Dadurch bleiben reichhaltige kulturelle Bedeutungen unter Fachbegriffen verborgen, und die meisten Besuchenden sehen Dinge, ohne deren Geschichten zu kennen. Die digitale Reliktbibliothek des Palastmuseums ist ein typisches Beispiel: technisch beeindruckend, aber erzählerisch fragmentiert und für Nicht‑Experten schwer zu navigieren.

Augenbeobachtung zur Einsicht in Köpfe

Um zu ergründen, was verschiedene Besucherinnen und Besucher tatsächlich auf diesen Seiten tun, führte das Team Eye‑Tracking‑Experimente mit drei Gruppen durch: professionelle Wissenschaftler, Geschichtsbegeisterte und allgemeine Touristinnen und Touristen. Die Teilnehmenden erledigten Aufgaben von freier Erkundung über gezielte Suchen bis hin zu komplexen Operationen wie dem Vergleichen verwandter Objekte. Kleine Kameras in Spezialbrillen zeichneten auf, wo ihre Blicke verweilten, wie lange sie blieben und wie der Blick über den Bildschirm sprang. Parallel protokollierte Software Mausklicks und Scrollbewegungen; nach jeder Sitzung bewerteten die Freiwilligen, wie kognitiv anstrengend die Aufgaben wirkten, und gaben in vertiefenden Interviews an, was sie verwirrte oder unterstützte.

Drei Arten, dasselbe Objekt zu betrachten

Die Daten zeigten drei deutlich unterschiedliche Muster von Aufmerksamkeit und Verhalten. Wissenschaftlerinnen und Wissenschaftler verbrachten die meiste Zeit mit technischen Panels, die Materialien, Maße und Datierungen auflisten, und bewegten sich in einem ordentlichen, linearen Pfad von Hauptbild zu Daten zu verwandten Objekten. Sie erledigten Aufgaben schnell und berichteten die geringste mentale Belastung. Begeisterte Nutzerinnen und Nutzer hingegen pendelten beständig zwischen Hauptbild und Abschnitten, die historischen Hintergrund und Symbolik erklären, und nutzten erzählerische Elemente, um ihr Verständnis zu vertiefen. Touristinnen und Touristen konzentrierten sich stark auf das zentrale 3D‑Bild und auffällige Empfehlungen und verirrten sich oft in der Oberfläche. Sie lasen Kategorien falsch, stolperten über Begriffe wie „vergoldet“, machten deutlich mehr Fehlklicks und fühlten sich überfordert und unsicher, wie es weitergehen sollte. Anders gesagt: Dieselbe Seite bediente Expertinnen und Experten gut, weckte Neugier bei Interessierten und schloss Neulinge stillschweigend aus.

Ein Museum gestalten, das zuhört und reagiert

Ausgehend von Theorien der Empathie und der „Materialität“ von Medien argumentieren die Autorinnen und Autoren, dass digitales Kulturerbe vom statischen Ausstellen zu einer sinnlicheren, erzählerisch reicheren Erfahrung übergehen sollte. Sie schlagen ein multimodales Redesign vor, das die Verschmelzung von Sehen und Hören in den Mittelpunkt stellt. Visuell würden die Seiten klare, dynamische Führungen erhalten, die wichtige Details hervorheben, Hotspots auf Motiven wie Drachen oder Lacktexturen anzeigen und Abschnitte entlang typischer Blickpfade neu anordnen. Akustisch würde jedes Artefakt gestufte Audioerklärungen bieten: fachliche Kommentare für Forschende, erzählerische Aufbereitungen für Enthusiasten und leicht verständliche Einführungen für Gelegenheitsbesucher. Ein Sprachfrage‑und‑Antwort‑System würde es erlauben, natürliche Fragen zu stellen und kurze, maßgeschneiderte Antworten zu erhalten, während subtile Klangsimulationen — etwa das Läuten einer Bronzeglocke oder das Schaben an Lackarbeiten — die physische Präsenz der Objekte evozieren würden.

Vom Klicken zum kulturellen Erleben

Für eine allgemeine Leserin oder einen allgemeinen Leser lautet die Schlussfolgerung: Ein gutes digitales Museum ist nicht nur eine Galerie hochauflösender Bilder. Es sollte eher dem Gefühl eines geführten Besuchs gleichen, der sich anpasst an die Person und an die Art, wie sie erkundet. Indem die Studie zeigt, wie verschiedene Nutzertypen tatsächlich auf der Seite des Palastmuseums agieren, liefert sie ein praktisches Argument für die Neugestaltung digitaler Kulturerbe‑Systeme entlang menschlicher Wahrnehmung statt alleiniger Technologieorientierung. Die Autorinnen und Autoren setzen ihre Vision noch nicht vollständig um, skizzieren aber eine klare Roadmap: Verwendet reale Verhaltensdaten, um intuitivere Visualisierungen, reichere Klangwelten und gestufte Erzählungen zu steuern. Gelingt dies, könnte ein rasches, oberflächliches Durchklicken in immersive Reisen verwandelt werden, in denen Menschen nicht nur antike Objekte bewundern, sondern sich auch mit den Leben, Fertigkeiten und Werten verbinden, die diese verkörpern.

Zitation: Ke, L., Qin, H., Long, J. et al. Multimodal interaction enhancement of digital cultural heritage system: user behavior analysis and interface reconstruction of the heritage scanning library of the palace museum. Sci Rep 16, 10654 (2026). https://doi.org/10.1038/s41598-026-44955-x

Schlüsselwörter: digitales Kulturerbe, Palastmuseum, Museumsschnittstellendesign, multimodale Interaktion, Benutzererfahrung