שיטה אוטומטית לתיעוּג רשתות משולשות תלת‑ממדיות צבעוניות המתמקדת בסגמנטצית שחיקה של עתיקות

מדוע "עיניים" דיגיטליות על אוצרות ישנים חשובות

במוזיאונים ובאתרים היסטוריים יציקות, ציורי קיר וקירות מגולפים נסדקים, מתקלפים ומתעמעמם בהדרגה. שימורנים זקוקים לדעת בדיוק היכן מתרחשת הפגיעה כדי להחליט מה לתקן ועד כמה הדחיפות – אך סימון כל כתם פגום ברישומי תלת‑ממד מפורטים של פריטים יכול לקחת שבועות. מאמר זה מציג שיטה אוטומטית לסימון שחיקה על מודלים תלת‑ממדיים צבעוניים ועשירים של עתיקות, והופך מטלה משעממת המצריכה מומחיות לתהליך דיגיטלי מהיר ומדויק.

מפסלים שבירים ועד תאמי תלת‑ממד מפורטים

כיום פריטי אומנות חשובים רבים מתועדים כמודלים תלת‑ממדיים צבעוניים ברזולוציה גבוהה הנבנים מתמונות. מודלים אלה תופסים גם את הצורה וגם את שכבת הצבע על המשטח ללא מגע עם החפץ המקורי, ומוסדות ממערות דונהואנג ועד המוזיאון הבריטי עושים שימוש בהם. עם זאת, רוב העושר הדיגיטלי הזה מבוזבז: המודלים משמשים בעיקר לתצוגה ואפיון ארכיוני, לא לניתוח מעמיק. בעבודות שימור האתגר המרכזי הוא לזהות ולמדוד בדיוק היכן הצבע מתקלף או החומר נסדק על פני משטחים מעוקלים ומורכבים. סימון ידני על מודלים תלת‑ממדיים הוא איטי ומתיש; סימון על תמונות שטוחות מפסיד מידע קריטי לגבי מיקום הנזק על החפץ עצמו.

קישור בין תמונות שטוחות לצורות תלת‑ממדיות

המחברים מציעים מערכת שמאפשרת ל־2D ול־3D "לדבר" זו עם זו כדי לשלב את החזקות של שניהם בו‑זמנית. ראשית, השימורנים מטעינים מודל תלת‑ממדי צבעוני לפלטפורמה ייעודית ובוחרים בערך באזור שמעניין אותם, כמו הזרוע או הבסיס של פסל. התוכנה ואז "מפשטת" מתמטית את החלק הזה של השטח, מפריסה אותו בתור תמונת מרקם שטוחה רציפה – סוג של עור דיגיטלי שנשלף ומתפרש עם עיוות מינימלי. כל פיקסל במפה השטוחה הזאת יודע בדיוק מאיזה משולש זעיר על המשטח התלת‑ממדי הוא הגיע, ולהיפך. הקישור הדו‑כיווני הזה מאפשר שכל סימון שנצבע — או במקרה זה, שזוהה — על התמונה השטוחה יוקרן באופן מדויק חזרה על החפץ המעוקל בתלת‑ממד.

להדריך את המחשב לזהות צבע מתקלף

לאחר שהמשטח מיישר ומתפרש לתמונה רציפה וברורה, המערכת מתמקדת בזיהוי אזורים פגומים, במיוחד מקומות שבהם הצבע נשבר או נשר. במקום להסתמך על ספים גסים של צבע, המחברים משתמשים בגרסה משופרת של שיטה שנקראת SLIC, שמחלקת את התמונה להרבה "סופרפיקסלים" קטנים ואחידים. מספרם וצורתם של הסופרפיקסלים נבחרים אוטומטית לפי מורכבותו הויזואלית של התיאור, תוך שימוש במדד ניגוד מרקם. לאחר מכן שלב אשכולות מקבץ את הסופרפיקסלים לאזורים "פגומים" ו"בריאים". גישה זו עוטפת את הקצוות הלא סדירים של צבע מתקלף בצורה הדוקה יותר ומפחיתה רעש בהשוואה לטכניקות סגמנטציה פופולריות אחרות. התוצאה היא מסכת נזק מדויקת המצוירת ברמת פיקסל על מפת המרקם ה‑2D.

להחזיר את הנזק לחפץ התלת‑ממדי

בעזרת הקישור שיצרו בין 2D ל‑3D, התוכנה משרטטת כל פיקסל פגום חזרה לנקודה המדויקת ברשת התלת‑ממדית שאליה הוא שייך. באמצעות טרנספורמציות גיאומטריות פשוטות היא ממירה קואורדינטות 2D למיקומים תלת‑ממדיים המותאמים לעקמומיות החפץ. נקודות אלו מאוגדות ואז ליצור "קליפה" צבעונית ומסודרת של שחיקה הצמודה למודל התלת‑ממדי המקורי. על פסל גואנין מעץ מצויר משושלת סונג שבסין, המחברים מראים שהמסכות האוטומטיות שלהם תואמות באופן הדוק לעבודת יד מקצועית שנעשתה בתוכנות דוגמנות, גם באזורים מעוקלים חזק או מפורטים מאוד. הם מעשירים עוד את הנתונים על‑ידי שכפול דיגיטלי והטמעה של דפוסי נזק אלה ב‑2D ו‑3D, ויוצרים דוגמאות אימון מציאותיות רבות עבור מערכות למידה עמוקה עתידיות.

מה המשמעות לשימור העבר

המחקר מדגים שתיאום מדוקדק בין תמונות שטוחות לגיאומטריה תלת‑ממדית יכול להפוך שכפולים דיגיטליים גולמיים של עתיקות לכלי פרקטי בשימור. הפלטפורמה מקצרת את העבודה והמבטלת את הסובייקטיביות של תיוג ידני, מייצרת מפות נזק עקביות ובעלות דיוק גבוה, ותומכת בעיבוד אצווה לטיפול באוספים גדולים. בפשטות, היא מספקת לשימורנים "מסמן" חצי‑אוטומטי ואמין לשחיקה על חפצים מורכבים ומניבה את כמות הנתונים המסומנים והברורים שנחוצה לשיטות ה‑AI המודרניות. למרות שהשיטה עדיין תלויה במרקמים ובפריסות איכותיות כדי להימנע מעיוותים, היא מהווה צעד משמעותי לעבר טיפול מדרגי ומונחה‑נתונים במורשת התרבותית העולמית.

ציטוט: Hu, C., Xie, Y., Xia, G. et al. An automatic annotation method for colored 3D triangular meshes oriented to cultural relic deterioration segmentation. npj Herit. Sci. 14, 150 (2026). https://doi.org/10.1038/s40494-026-02421-x

מילות מפתח: שימור מורשת תרבותית, דיגיטציה תלת‑ממדית, גילוי נזקים אוטומטי, מיפוי מרקם, מאגרי נתוני למידה עמוקה