דימות פיקסל יחיד עם פיצוי תנועה רב‑ערוצי ורב‑מרכזי של מטרה קשיחה זזה באופן שרירותי במישור דו‑ממדי

תמונות חדות יותר ממספר פיקסלים קטן יותר

טכנולוגיות דימות מסתמכות בדרך כלל על שבבי מצלמה גדולים ומורכבים המלאים במיליוני פיקסלים זעירים. אך יש גישה שונה: להשתמש בחיישן אור יחיד ולהשאיר לדפוסים חכמים ולחישוב לעשות את השאר. המאמר הזה מראה כיצד ניתן לדחוף את רעיון הפיקסל היחיד קדימה, כך שיהיה אפשר לעקוב ולדמות בבהירות עצמים קטנים ומהירים שמסתובבים ומתגלגלים ואף נוטים לצאת חלקית מהשדה — הכל בזמן אמת.

מדוע פיקסל אחד יכול להספיק

בדימות פיקסל יחיד, הסצנה מוארה או מסוננת באמצעות רצף של דפוסים מבניים, וגלאי יחיד מודד רק את הבהירות הכוללת לכל דפוס. על ידי שילוב כל המדידות הללו באופן מתמטי ניתן לשחזר תמונה מלאה. גישה זו אטרקטיבית בכל מצב שבו מערכי חיישנים מתקדמים יקרים או לא מעשיים, כגון בהדמיה בתדר טרה‑הרץ, בהדמיית רנטגן או בהדמיית פוטונים בודדים. היא גם מתאימה לדגימת "מכווצת" (compressed), כך שנדרשים הרבה פחות מדידות מאשר במצלמות מסורתיות. עם זאת, יש מגבלה עיקרית: האובייקט בדרך כלל חייב להישאר סטטי בזמן שהדפוסים מוחלים זה אחרי זה. אם הוא זז, המדידות אינן תואמות יותר, מה שגורם לטשטוש ורוחות ברק בתמונה הסופית.

האתגר של מטרות זזות ומסתובבות

ניסיונות קודמים להתמודד עם תנועה בדימות פיקסל יחיד התרכזו בתנועה בקו ישר פשוט. הם הסתמכו לעתים על הוספת דפוסי "מאתר" מיוחדים לרצף כדי להעריך מיקום, או על תמונות תצוגה מקדימות או מצלמות חיצוניות למדידת התנועה. תחבולות אלו או שמקטינות את קצב הפריימים היעיל, מניחות תנועה מחזורית, או מתקשות כאשר האובייקט גם מתרגם וגם מסתובב. תנועה סיבובית קשה במיוחד: אפילו טעות קטנה בזווית המוערכת יכולה להתרגם להזזות גדולות בקצה האובייקט, ולמעוך פרטים עדינים. סכמות קיימות גם נוטות לאבד מעקב כאשר האובייקט נוטה לצאת חלקית משדה הראייה — מצב נפוץ במשימות מעקב אמיתיות.

דרך חדשה לעקוב ולהקפיא תנועה

המחברים מציגים MC3‑SPI (דימות פיקסל יחיד עם פיצוי תנועה רב‑ערוצי ורב‑מרכזי), שיטה שמתגברת על המעקב ודימות של אובייקטים קשיחים העוברים כל תנועה דו‑ממדית — כולל שילובים שרירותיים של תרגום וסיבוב — מבלי להקריב את הרזולוציה הזמנית. הרעיון המרכזי הוא להצפין מספר מוגבל של דפוסי פורייה שנבחרו בקפידה, הפועלים כמו סרגלי מדידה גלובליים שמניחים על שדה הראייה. על‑ידי בחינת כיצד פאזה האות מהדפוסים האלה משתנה, המערכת יכולה למקם את מרכז הכובד של האובייקט בדיוק של כשליש פיקסל. מאחר שהאור מפוצל לערוצי אדום, ירוק וכחול, כל צבע מספק מרכז כובד נפרד; יחד, שלוש הנקודות הללו מגדירות הן את מיקום האובייקט והן את כיוונו בכל פריים מדידה. עם המידע הזה, השיטה רצה למעשה את הסרט לאחור: היא מיישמת את התרגומים והסיבובים ההפוכים על הדפוסים עצמם לפני שילובם לתמונה, הליך שהמחברים מכנים טרנספורם היפוך מפוצה לתנועה (inverse motion‑compensated transform).

לראות יותר עם פחות מדידות

באמצעות סימולציות וניסויים, החוקרים מראים כי דפוסי פורייה מתאימים במיוחד לתיקון תנועה כזה, משום שהם נשארים כמעט אורטוגונליים גם לאחר הזזה וסיבוב, ושומרים על איכות השחזור בקצבי דגימה נמוכים. לעומת זאת, משפחת דפוסים פופולרית אחרת — דפוסי הדמארד (Hadamard) — מאבדת את האורטוגונליות שלה מהר יותר תחת פיצוי תנועה וזקוקה ליותר מדידות כדי להשיג איכות תמונה דומה. באמצעות הסכימה המותאמת שלהם מבוססת פורייה, הצוות עקב ושחזר בהצלחה מטרות צבעוניות כמו האותיות "BIT", דמות מצוירת וטיל צעצוע, שכולן עברו תנועות דו‑ממדיות מורכבות. גם כאשר האובייקט דוחק לאורך קצה שדה הראייה כך שאין פריים יחיד שמכיל אותו בשלמותו, MC3‑SPI יכולה לשחזר את המסלול האמיתי על ידי ניצול המידע החוזר של מרכזי הכובד מהשלושה ערוצי צבע, ועדיין לבנות עם הזמן תמונת צבע חדה ומתמלאת.

מדגמה במעבדה למערכות מהירות ומעשיות

יתרון מרכזי של הגישה הוא המהירות. קביעת התנועה דורשת רק שישה דפוסי מיקום לכל פריים, כך שבקצב המודולציה המקסימלי של התקן מראות מיקרו‑מראות דיגיטלי סטנדרטי, המערכת יכולה בעקרון לעקוב אחרי תנועה אלפי פעמים בשנייה. שלב השחזור הבסיסי — סכימת דפוסים מפוצי התנועה — גם הוא מהיר מאוד, סדרי גודל מהירים יותר מאלגוריתמי מיטוב איטרטיביים, ועדיין מספק תוצאות ברורות בקצבי דגימה נמוכים של עד 5%. ניתן להוסיף מאוחר יותר אלגוריתמים מתוחכמים יותר כאשר נדרשת איכות תמונה גבוהה יותר וזמן העיבוד זמין. מאחר ש‑MC3‑SPI פועלת עם רכיבים מסחריים סטנדרטיים ומשתלבת בערכות פיקסל‑יחיד רגילות, ניתן לשלב אותה עם שיטות היפרספקטרליות, תלת‑ממדיות או רזולוציה בזמן, מה שמאפשר פוטנציאלית דימות מפורט של מטרות מהירות, חלשות או קשות להגעה בתחומים הנעים ממיקרוסקופיה ועד חישה מרחוק.

מה משמעות הדבר לדימות בעתיד

בעיקרון, עבודה זו מראה כיצד להפוך מערכת פיקסל‑יחיד פשוטה למצלמה זריזה ורגישה לתנועה שיכולה לעמוד בקצב של חפצים זריזים ומסתובבים ועדיין לספק תמונות חדות. על‑ידי בחירה חכמה של דפוסי ההארה, שימוש בערוצי צבע להגדרת נקודות ייחוס מרובות על האובייקט, ופיצוי התנועה בתוכנה, המחברים מתגברים על המתיחות הוותיקה בין מהירות, רזולוציה ורגישות לתנועה בדימות פיקסל יחיד. זה פותח נתיב מעשי למערכות דימות קומפקטיות וזולות שלא רק מקפיאות את העולם, אלא עוקבות אחריו בזמן אמת.

ציטוט: Shao, C., Cao, Y., Li, S. et al. Multichannel multicentroid motion-compensated single pixel imaging of a 2D arbitrarily moving rigid-body target. Commun Eng 5, 61 (2026). https://doi.org/10.1038/s44172-026-00619-2

מילות מפתח: דימות פיקסל יחיד, מעקב תנועה, דימות חישובי, דפוסי פורייה, דימות במהירות גבוהה