שילוב מורשת דיגיטלית של אופרת קון־צ׳וּ וגן הקלאסי של סוז’ו

הליכה חלומית דרך ההיסטוריה

דמיינו שאתם צועדים לתוך גן סיני שמן שעבר מאות שנים, שומעים שירה עדינה של אופרה קלאסית בעודכם עוברים לצד בריכות ופביליונים, וכל זאת מבלי לצאת מחדר המגורים. המחקר הזה חוקר כיצד הדמיה תלת־ממדית מתקדמת ומציאות מדומה יכולות לאחד שתי אוצרות מפורסמים של התרבות הסינית — אופרת הקון־צ׳וּ והגנים הקלאסיים של סוז’ו — כך שאנשים היום יוכלו לחוש בהם כשלם חי במקום כחתיכות מוזאון מופרדות.

מדוע המקום חשוב למסורת

מורשת תרבותית היא יותר מאובייקטים בתצוגה זכוכית או הקלטות בארכיון. היא כוללת גם סביבות פיזיות, כמו מבנים היסטוריים וגנים, וגם פרקטיקות חיות כמו מוזיקה, תיאטרון ומלאכות. גופים בינלאומיים כמו אונסק"ו מדגישים ששתי הדומיינים האלה תלויות זו בזו: הופעות נותנות משמעות וחיים למקומות, בעוד מקומות מעצבים כיצד ההופעות מובנות. עם זאת, רוב הפרויקטים הדיגיטליים מפצלים ביניהן — או סורקים מבנים בתלת־ממד ללא אנשים, או מקליטים מבצעים בסטודיואים ריקים. המחברים טוענים שהפיצול הזה פוגע ב"רוח המקום", ומקשה על הקהל לחוש את העומק הרגשי וההיסטורי של המסורת.

מצילומי לייזר לסצנות חיות

ניסיונות מוקדמים לדיגיטציה של אתרים היסטוריים הסתמכו על סורקי לייזר יקרים ואחריהם על פוטוגרמטטריה, שבונה צורות תלת־ממדיות מתוך הרבה תמונות. במקביל, חליפות תנועות תפסו פופולריות כדי לתעד רקדנים ושחקנים ולהניע דמויות מונפשות בסביבות וירטואליות. למרות כוחן, לכלים אלה יש מגבלות: הם מתקשים לעתים עם בדים דקים, משטחים מבריקים, מים ופנים ריאליסטיות, ונוטים לייצר אווטארים שמרגישים מעט מלאכותיים. טכניקה חדשה יותר בשם 3D Gaussian Splatting מציעה דרך שונה, המשתמשת במיליוני כתמים צבועים קטנטנים כדי לשחזר כיצד האור נע בפועל בתוך סצנה. המחקר הזה בונה על שיטה זו ומרחיב אותה לאורך זמן כדי ליצור "וידאו וולומטרי" של מבצעים אמיתיים שניתן להסתובב סביבם בתלת־ממד.

אחוות אופרה וגן לעולם אחד

הצוות בחר בשני אייקונים תרבותיים מסוז’ו: גן המנהל העניו הרשום כאתר מורשת עולמית וסצנת אופרת קון־צ׳וּ קלאסית, "הליכה בגן, חלום מופרע", מתוך שושנת האדמונית. הם תכננו תחילה מסלול הליכה בגן שתואם את נקודות העלילה של סצנת האופרה, ואז תיעדו את הגן באמצעות מערכי מצלמות מרובים, רחפנים ועיבוד מתקדם להסרת תיירים מהתמונות. בסטודיו המצויד ב‑81 מצלמות ומסכי ירוק הם צילמו מבצעי קון־צ׳וּ במלוא התלבושות והפכו את החומר לווידאו וולומטרי באמצעות גרסה אופטימיזית של Gaussian Splatting ששומרת על תנועה חלקה ותלבושות ברורות. שיחזור הגנים והשחקנים התלת־ממדיים החיים אוחדו במערכת מציאות מדומה שנבנתה ב‑Unity, ויצרו מה שהמחברים קוראים לו תאטרון דיגיטלי משולב.

בדיקת התחושות של המשתמשים במקום

כדי לבדוק האם הגישה המשולבת אכן משנה משהו, החוקרים ערכו שני סבבי מחקר משתמשים עם מתנדבים שלבשו משקפי VR. בסבב הראשון, המשתתפים חוו את אותו קטע קון־צ׳וּ בשלוש דרכים: כווידאו שטוח רגיל, כסצנה תלת־ממדית שנבנתה מפוטוגרמטטריה מסורתית בתוספת דמויות מונפשות ממערכות לכידת תנועה, וכגרסה מבוססת לגאוסיאנים עם מבצעים וולומטריים. הצופים דרגו כל גרסה על עניין, איכות ויזואלית, הטמעה, הבנה, תהודה רגשית ומוטיבציה ללמוד עוד. הגרסה המבוססת לגאוסיאנים ניצחה בכל המדדים. אנשים תיארו את האנימציה המסורתית כ"כמו בובות", בעוד הזמר בוולומטריה הרגיש נוכח, עשיר בפרטים ומשולב באופן טבעי בגן, כולל עצים, עלי לוטוס והשתקפויות במים.

כשהרקע הופך לסיפור

הניסוי השני שאל שאלה ממוקדת יותר: האם הגן עצמו חיוני לאופן שבו אנשים מבינים ומעריכים את האופרה? המשתתפים השוו שתי גרסאות מבוססות לגאוסיאנים — אחת שהציגה רק את המבצעת הקון־צ׳וּ במרחב ריק, והשנייה שמקמה אותה חזרה בגן המנהל העניו. רובם העדיפו את הגרסה המשולבת. הם אמרו שזה הרגיש כמו "להיכנס למסך", ולבסוף לראות את גן האביב שתמיד תיארו המילים. אצל חלקם, הסביבה הדיגיטלית אף עלתה על ביקור באתר, מכיוון שהיא נמנעה מהמוני אנשים ורעשים אך שמרה על האווירה. מעטים העדיפו את הגרסה הפשוטה יותר בסגנון במה, מתוך דאגה שהקישוט יתר על המידה יפגע בשירה, אבל הם היו במיעוט.

דרך חדשה לשימור מסורות

בקצרה, המחקר מראה שכאשר הופעה מסורתית והגדרה היסטורית מאוחדים בעולם וירטואלי בעל דיוק גבוה, אנשים לא רק נהנים מהחוויה יותר אלא גם מבינים ודואגים לתרבות בצורה עמוקה יותר. התאטרון הדיגיטלי המשולב הופך את קון־צ׳וּ בגן ל"מסמך חי" משותף שניתן לחקור, במקום תיעוד סטטי. מבט קדימה, המחברים רואים בגישה זו תבנית לשימור סוגים רבים של מורשת — חיבור טקסים, מוזיקה או מלאכות חזרה לרחובות, חצרות ונופים שאליהם הם שייכים, והזמנת קהלים עולמיים לשוטט באותם עולמות כאילו הם באמת שם.

ציטוט: Tian, F., Lu, Y., Tu, M. et al. Digital heritage integration of Kunqu opera and Suzhou classical gardens. npj Herit. Sci. 14, 78 (2026). https://doi.org/10.1038/s40494-026-02353-6

מילות מפתח: מורשת מציאות מדומה, אופרת קון־צ׳וּ, הגנים הקלאסיים של סוז’ו, 3D Gaussian splatting, מורשת תרבותית בלתי מוחשית