מחקר יישומי של טכנולוגיית שיחזור על-רזולוציה בתמונות המבוססת על מודל דיפוזיה בקורלציה דיגיטלית תלת־ממדית של תמונה

תמונות חדות יותר למדידות טובות יותר

מהנדסים מודרניים רבים מסתמכים על מצלמות כדי לעקוב אחרי אופן כיפוףם, מתיחה או סדיקה של חומרים — וכל זאת ללא מגע. מחקר זה מראה כיצד שיפור חכם של תמונה יכול לשחזר פרטים שימושיים שאבדים בדרך כלל כאשר מצלמה בודדת מתבקשת לבצע את עבודתן של כמה מצלמות, ובכך להפוך את המדידות לזולות יותר ובדומה למדי למדידות במעבדות מתקדמות.

כיצד מצלמות עוקבות אחרי דפורמציות

הטכניקה שבמרכז העבודה נקראת קורלציה דיגיטלית תלת־ממדית של תמונה: שיטה שעוקבת אחרי דפוס מקרי של נקודות זעירות (ספקל) שצבוע על האובייקט. בהשוואת הזזת דפוס הספקל בין זוג תמונות, מחשב יכול לשחזר כיצד כל נקודה על המשטח נעה בתלת־ממד. באופן מסורתי זה מחייב לפחות שתי מצלמות מסונכרנות היטב שמצלמות מזוויות שונות, מה שמייקר את המערכת והופך ניסויים באירועים מהירים, כמו התנקשות, לטכניים ומאתגרים.

מדוע מערכות מצלמה בודדת מאבדות פרטים

כדי לפשט ניסויים, חוקרים פיתחו תחבולות אופטייות שמאפשרות למצלמה אחת להתנהג כאילו היא כמה מצלמות. מראות או פריזמות מחלקות את האור הנכנס כך ששבב המצלמה תופס מספר מבטים בו‑זמנית. זו דרך לעקוף בעיות תזמון ולהימנע מרכישת מצלמת משלים. המחיר הוא שמספר הפיקסלים הקבוע של המצלמה מתחלק בין המראות הוירטואליים, ולכן כל מבט הופך לבעל רזולוציה נמוכה יותר ופרטי הספקל העדינים מטושטשים. האובדן הזו של חדות מפחית ישירות את הדיוק שבמדידת התנועה והצורה.

לאמן מודל להחזיר את הפרטים

המחברים מציעים דרך חכמה לבנות מחדש את הפרטים החסרים לאחר צילום התמונה. שיטתם, שנקראת LaESR Diff, משלבת שני ענפים של אלגוריתמים מודרניים לתמונה. ראשית, גרסה משופרת של מודל גנרטיבי יוצרת ניחוש מיטבי איך תמונת ספקל חדה עשויה להיראות. לאחר מכן תהליך דיפוזיה מלטש בהדרגה את הניחוש הזה על ידי הוספה והסרה של רעש מבוקר בקפידה, בעבודה לאחור מאקראיות לתמונה נקייה ובעלת רזולוציה גבוהה. הצוות התאים שתי הפעולות הללו במיוחד לתמונות ספקל, שאופיין בצפיפות ובגרעיניות עדינה השונה מאוד מצילומי היום־יום.

עיצוב למטרת מדידה, לא רק למראה

מרבית כלי השיפור מועברים לטובת עין האדם או כדי להשיג ציוני איכות כלליים כמו יחס אות לרעש מקסימלי (PSNR) או דמיון מבני (SSIM). במדידות מבוססות ספקל, שינויים זעירים בפיקסל יחיד משמעותיים יותר מאשר חלקות או ניגודיות. על מנת לקחת זאת בחשבון, המחברים שילבו מונח מתמטי באימון שמעדיף דמיון מקומי בחתיכות קטנות של דפוס הספקל — אותו סוג השוואה שישמש מאוחר יותר למדידת תנועה. הם גם החליפו לוח זמנים נפוץ של רעש חלק בלוח זמנים מעוצב כעקומה ממוקדת וחדה, כך שמרקמים בתדר גבוה שורדים את תהליך הדיפוזיה במקום להיטשטש.

בדיקות על נתונים משותפים ודגימות מתכת אמיתיות

השיטה החדשה נבדקה ראשונית על ביקורת ציבורית לקורלציה תלת־ממדית של תמונה, שבה צורת ומהלך המדגם המורכב ידועים כערכי אמת. בהשוואה לשינוי גודל סטנדרטי וכלי על‑רזולוציה מתקדמים אחרים, LaESR Diff ייצרה תמונות ספקל חדות יותר וחשוב מזה — קיצרה שגיאות בגובה המשטח המוחזר ביותר ממחצית בהגדלות גבוהות במיוחד. היא גם הפחיתה שגיאות הזזה בכמעט שני שלישים ביחס לאינטרפולציה בסיסית. בניסוי מעבדה נפרד, הצוות מתח דגימת פלדה בזמן הקלטתה בכמה מערכות סטריאו, כולל מערכות מצלמה בודדת המשתמשות במראות ופריזמות, והשווה את המתח המוסק למדידה בלתי תלויה.

שדרוג מערכת זולה לכמעט פרימיום

באותם ניסויים במעבדה, מערכת מצלמה בודדת שסבלה בתחילה מהאובדן החזק ביותר של רזולוציה הראתה את השגיאות הגדולות ביותר במדידה. לאחר שהוסרו תמונותיה בעזרת LaESR Diff, השגיאה הממוצעת ירדה והגיעה קרוב לזו של מערכת שתי מצלמות מסורתית, גם בהגדלה של פי שמונה. שיטות שיפור אחרות או עזרו פחות או אף פגעו בדיוק בהגדלות גבוהות. המחברים גם הראו כי ציוני איכות תמונה מקובלים אינם מתאימים למדידת דיוק מדידה, מה שמדגיש את הצורך לשפוט כלים אלה לפי שיפור תוצאות ניסויית ממשיות.

מה זה אומר למדידות העתיד

עבור לא מומחים, התוצאה המרכזית היא ששיפורי על־רזולוציה מתקדמים יכולים להפוך מערכי מצלמה בודדת קומפקטיים וזולים לכלי מדידה המתחרים במערכות שתי מצלמות מורכבות יותר. על ידי שחזור פרטי ספקל עדינים שהפיצול האופטי היה מושלך בדרך כלל, הגישה המוצעת שומרת על הנוחות של מצלמה אחת מבלי לשלם את הקנס המוכר של ירידת דיוק. אסטרטגיה זו של התאמת שיפור תמונה לצרכי משימת המדידה יכולה להתרחב לתחומים רבים נוספים שבהם מצלמות משמשות ככלים מדעיים שקטים — ממעקב אחרי גשרים ועד בדיקת חלקי מטוסים.

ציטוט: Zhou, D., Li, H., Yao, C. et al. Application research of image super-resolution reconstruction technology based on diffusion model in 3D digital image correlation. Sci Rep 16, 15767 (2026). https://doi.org/10.1038/s41598-026-44638-7

מילות מפתח: על־רזולוציה בתמונה, קורלציה דיגיטלית של תמונה, מודל דיפוזיה, ראיית סטריאו ממצלמה יחידה, מדידה ללא מגע