מערכת SfM לדיגיטציה של ציורי קיר עם התאמת תכונות מודרכת-תשומת לב ושחזור ספאורס חסין

למה שמירת ציורי קיר עתיקים דורשת שיטות דיגיטליות חדשות

מאחורי דיונות בצפון‑מערב סין, ציורי הקיר במערות מוגאו מטשטשים, סדוקים ומתקלפים בהדרגה. שימורנים רוצים עותקים דיגיטליים מפורטים של הפרסקו כדי שחוקרים והציבור יוכלו לחקור אותם גם אחרי שהמקור יתפורר. אבל להפוך אלפי תמונות מקרוב לתצוגה שטוחה, בלתי מעוותת של קיר מעוקל ופגום זו משימה מפתיעה קשה. מאמר זה מציג מערכת ראיית מחשב חדשה המותאמת במיוחד לציורי מערות, המשפרת את חדות השחזור, אמינותו והמעשיות שלו בקנה מידה גדול.

מתמונות מרובות לתצוגת קיר אחידה אחת

דיגיטציה של ציור קיר אינה מסתכמת בלחיצה על כפתור מצלמה אחת. מצלמות ברזולוציה גבוהה לוכדות שורת תמונות חופפות ממערכת רכבת שנעה לאורך הקיר, ויוצרות רשת צפופה של תצפיות מקומיות. תוכנות מסורתיות פעמים רבות "תופרות" תמונות אלה ב‑2D, מעוותות וממזגות אותן כמו פנורמה. זה עובד כשהקירות שטוחים והאור אחיד, אבל ציורי מערה מעוקלים, מתנפחים, מחשיכים בפינות וכוללים אזורים ריקים או חזרתיים מאוד. בתנאים אלו התפירה יכולה ליצור תפרים נראים לעין, דמויות לא מסונכרנות או צורות מעוותות. המחברים במקום זאת מאמצים אסטרטגיה תלת‑ממדית בשם Structure‑from‑Motion (SfM): המחשב מעריך היכן המצלמה עמדה בכל צילום ומשחזר את משטח הקיר במרחב לפני שהוא מקרין חזרה תמונה חזיתית מדויקת.

ללמד את המחשב לזהות את הפרטים הנכונים

ליבת ה‑SfM היא התאמת פרטים חזותיים זעירים — "נקודות תכונה" — בין זוגות תמונות. על צוירי קיר זה מסוכן: שורות של דמויות כמעט זהות, פיגמנטים דהויים ושטחים ריקים גדולים עלולים להטעות אלגוריתמים ולחבר בין נקודות שגויות או למצוא מעט מדי התאמות. המערכת החדשה מתמודדת עם זאת באמצעות שיטת התאמה "מודרכת‑תשומת לב" בהשראת טכניקות למידה עמוקה מודרניות. במקום לשפוט כל תכונה בנפרד, האלגוריתם בוחן דפוסי תכונות יחד ולומד אילו מהן סביר שיושוו בין תצפיות חופפות. הוא גם משלב הבנה של המקום בו אמורה להתרחש ההחפלה: תכונות שמחוץ לאזור החופף של שתי תמונות מדורגות במשקל נמוך יותר בעדינות, גם אם הן דומות במראה, בעוד שתכונות באזורי חפיפה סבירים מועדפות. השילוב הזה של הקשר חזותי ומודעות מרחבית מצמצם בצורה חדה התאמות שגויות תוך שהוא שומר על עיבוד בר־ניהול לאלפי תמונות ברזולוציה גבוהה.

שחזור הקיר בתלת‑ממד, קצה אחר קצה

אפילו עם התאמות טובות יותר, ה‑SfM עדיין יכול להיכשל אם הוא מנחש שגוי את הגדרות המצלמה או מנסה לכוונן יותר מדי נקודות מבט בבת אחת. ציורי קיר מציבים בעיה ייחודית מכיוון שמטא‑דאטא של המצלמה פעמים רבות חסרים או לא אמינים לאחר עיבוד, והסצנה כמעט שטוחה, מה שעלול להוביל לכך שהקיר המשוחזר "יתקמר" פנימה או החוצה במודל הוירטואלי. המחברים מציעים שני קיבועים ספציפיים למוריאלים. ראשית, הם מעריכים מחדש את אורך המוקד של המצלמה — לא מתגי קבצים, אלא בעזרת בדיקת ערכי מועמדים ובחירה באלה שמניבים גיאומטריה קוהרנטית, ואז משתפים ערך ממוצע בין תצפיות שצולמו באותו חיוג. שנית, הם מחליפים כוונון גלובלי ב"כיוון חבילה מבוסס‑קצוות": במקום לכוונן תמיד את כל המצלמות, המערכת מלטשת רק מצלמות ונקודות תלת‑ממד בגבול המתפתח של השחזור, ומשאירה את התמונות הפנימיות המוצמדות היטב כעת לעת עתה. אופטימיזציה ממוקדת זו מצמצמת סחף, שומרת על שטיחות הקיר הוירטואלי ומקצרת את זמן העיבוד.

מבחן המערכת במערות אמיתיות

החוקרים העריכו את המערכת שלהם על כמעט 1,800 תמונות מתשע מערות במוגאו ועל מאגר ציבורי גדול בשם MuralDH, שם סימולו את האופן שבו מצלמה מחליקה על פני ציור קיר. בהשוואות ישירות עם כלים פתוחים נפוצים כגון COLMAP, VisualSFM, OpenMVG ו‑MVE, הצינור החדש שיחזר יותר מערכות ציורים בהצלחה, הניב שגיאות גיאומטריות נמוכות יותר ופעל מהר יותר. מערות שבמערכות מתחרות נכשלו כלל בשחזור סיפקו ענני נקודות נקיים ונתיבי מצלמה יציבים בשיטה החדשה. כאשר המודלים התלת‑ממדיים הספאוריים שהתקבלו הוזנו לתוכנה מסחרית לשחזור צפוף, הם הניבו תמונות חזיתיות ברורות וכמעט חפות מעיוות שהשימורנים יכלו להשתמש בהן בפועל — דבר שזרמי עבודה אוטומטיים קודמים לא יכלו לספק באמינות.

חלון דיגיטלי ברור יותר אל העבר

עבור לא‑מומחים, המסקנה פשוטה: עבודה זו הופכת את בניית העתקי דיגיטל נאמנים וברזולוציה גבוהה של ציורי קיר פגיעים ליישימה בקנה מידה. על‑ידי התאמת כלי ראיית מכונה לאיפיוני ציורי המערות — מוטיבים חזרתיים, רְלִיף עדין, נתוני מצלמה חסרים — מערכת ה‑SfM של המחברים הופכת ארכיוני תמונות עצומים ומבולגנים לתצוגות קיר חלקות ובעלות יסוד גיאומטרי. שחזורים דיגיטליים אלה יכולים לתמוך בתכנון שימור, בניתוח מחקרי ובהצגות לציבור, ולעזור לשמר את הסיפורים החזותיים על קירות עתיקים גם כשהפיגמנטים המקוריים ממשיכים את הדעיכה האיטית והבלתי נמנעת שלהם.

ציטוט: Fang, K., Min, Z. & Diao, C. An SfM system for mural digitization with attention-guided feature matching and robust sparse reconstruction. npj Herit. Sci. 14, 166 (2026). https://doi.org/10.1038/s40494-026-02385-y

מילות מפתח: דיגיטציה של ציורי קיר, מורשת תרבותית, שחזור תלת-ממדי, ראיית מכונה, מערות דונחואנג מוגאו