מערך נתונים של חריגויות בתמונות אוויריות לצידי משימות חיפוש בשטחים מיוערים מורכבים

מדוע רמזים זעירים ביערות גדולים חשובים

כשמישהו נעלם ביער, הפרט הזעיר ביותר על הקרקע עשוי להחזיק את התשובה: חתיכת בד, יריעת פלסטיק, או מקלט זמני חלקית מוסתר על ידי עלים. מאמר זה מתאר כיצד מעקב טראגי אחרי אדם ביער בגרמניה הוביל ליצירת מערך תמונות גדול ופתוח, שנועד לסייע למחשבים ולבני אדם למצוא רמזים חזותיים חלשים כאלה ביערות צפופים. העבודה נמצאת בצומת חקירת פשעים, חיפוש והצלה ובינה מלאכותית, ומציגה הן את ההבטחה והן את המגבלות הנוכחיות של שימוש במצלמות אוויריות ובאלגוריתמים לזהות מה שלא שייך בטבע.

מקרה טרגי בנוף קשה

הסיפור מתחיל ברצח משפחתי בכפר וייטפלד באפריל 2025. המשטרה העריכה שהחשוד ברח ליער שמקיף את האזור ומשתרע על כ־60 קילומטרים מרובעים. מאות שוטרים, מסוקים, רחפנים וצוללנים חיפשו במשך שבועות, אך הצמחייה הצפופה וגודלו העצום של האזור הכתיבו כישלון למאמצים הקונבנציונליים. כדי להרחיב את החיפוש, מטוס מחקר מצויד במערכת מצלמה מיוחדת טס מעל מקטע של 25 קמ"ר, עם התמקדות באזור עדיפות של 10 קמ"ר. המטוס הקליט יותר מ־30,000 תמונות צבע ברזולוציה גבוהה, כל אחת חדה דיה כדי להבחין בפרטים המעידים על כמה סנטימטרים בלבד, בתקווה לזהות חפצים או מקלטים שיכולים להעיד על נוכחות אדם.

הפיכת אלפי תמונות לחיפוש משותף

למרות התמונה החדה, גילוי אוטומטי מלא היה לא מציאותי. רמזים רבים הופיעו ככתמים זעירים ברוחב של כמה פיקסלים בלבד ולעיתים הוסתרו מתחת לענפים וצללים. במקום להסתמך רק על תוכנה, הצוות השיק מאמץ מקוון המערב קהל. באמצעות צופה אינטרנטי מותאם, 160 מתנדבים מהמשטרה ומכמה אוניברסיטאות בדקו 10,659 תמונות. הם יכלו לעשות זום, להזיז את התמונה, לכוונן בהירות ולעבור בין התמונה המקורית למסיכה צבעונית שנוצרה ממחשב והדגישה גוונים חשודים. המתנדבים סימנו כל דבר שנראה מחוץ למקומו ביער, מפריטים בהירים על הקרקע ועד נקודות מסתור אפשריות, וסיווגו אותם כאובייקטים פוטנציאליים, מקלטים, אנשים או לא ידוע. הדיווחים שלהם הנחו בדיקות המשך בשטח על ידי צוותי משטרה.

מה מכיל מערך הנתונים

מאמץ הקהל הניב 405 ממצאים מובחנים. המשטרה שיפטה 238 מהם כרלוונטיים וביקרה בכל המיקומים הללו באופן אישי, ותיעדה מה נמצאו בפועל. הממצאים נעו מחביות ישנות ושקי זבל ועד יריעות, צריפים ומקומות ציד, ולעיתים אנשים או סימנים לפעילות אנושית. באמצעות טכניקות מיפוי, החוקרים שיערו כל ממצא מתוייג על כל תמונה שבה הוא הופיע מזוויות שונות ובכמויות שונות של כיסוי על ידי עלים וענפים. תהליך זה הניב 34,424 מופעי חריגה מתוייגים הפזורים על פני 10,659 התמונות של אזור העדיפות, יחד עם כמעט 20,000 תמונות נוספות ללא תיוג מאזורי סמוך. כל הנתונים, יחד עם כלי ההערה ומפה אינטראקטיבית, זמינים באופן פתוח כדי שאחרים יוכלו לבדוק את אותו היער, להוסיף תיוגים חדשים או להוריד חבילות תמונות עבור האלגוריתמים שלהם.

מדוע שיטות מחשב נוכחיות קצרות כראש

כדי להראות עד כמה חיפוש מסוג זה ביער תובעני, המחברים בדקו מספר שיטות פופולריות לזיהוי חריגות, כולל מערכות למידת עומק ודגמים פשוטים המבוססים על סטטיסטיקת צבע. כלים אלה מעניקים לכל פיקסל או אזור ניקוד המשקף עד כמה הוא נראה חריג ביחס לסביבתו, ואז מחליטים האם מדובר בחריג. במערך הנתונים הזה, שיטות למידת העומק מצאו רק אחוז קטן של חריגויות אמיתיות, והשיטות הפשוטות ייצרו יותר מדי אזעקות שווא מפוזרות בכל תמונה. צמחייה צפופה, טשטוש תנועה מהמלטוס הנע, והעובדה שרבים מהרמזים תופסים רק מספר פיקסלים קטן עבדו כולם נגד האלגוריתמים. כאשר הצוות ניסה רשת זיהוי עצמים מודרנית שאומנה ישירות על הנתונים המתויגים, גם היא נכשלה, ואישרה שזיהוי אנשים או חפצים סטנדרטי אינו מהימן כשמרבית המטרה מוסתרת.

מה משמעות הדבר עבור חיפושים עתידיים ביער

בסופו של דבר, טיסת החיפוש כמעט והחמיצה את החשוד, וגופתו נמצאה מאוחר יותר מעט מחוץ לאזור הסריקה. עם זאת, המבצע הותיר מאחוריו אוסף נדיר ומתועד בקפידה של תמונות חיפוש אמיתיות, תיוגים אנושיים ואישורים משטרתיים. לקוראים שאינם מומחים, המסר המרכזי הוא שזיהוי חפץ קטן המיוצר בידי אדם מן האוויר בתוך יער עמוס קשה הרבה יותר למחשבים מאשר לבני אדם, במיוחד כאשר נראים רק חלקיקי מידע. על ידי שיתוף חופשי של מערך הנתונים והכלים, המחברים מקווים לסייע לחוקרים לבנות מערכות חכמות יותר המתחשבות בהקשר רחב יותר, כמו תבניות על פני עצים ונקודות מבט רבות, במקום להסתמך רק על פיקסלים מקומיים. אלגוריתמים משופרים שיוכשרו על נתונים ריאליסטיים כאלה עשויים יום אחד לתמוך במשימות חיפוש והצלה מהירות, אמינות יותר ולעזור לחוקרים לקרוא רמזים חיוניים המוסתרים מתחת לצמרת היער.

ציטוט: Amala Arokia Nathan, R.J., Gessner, M., Özkan, N. et al. An aerial color image anomaly dataset for search missions in complex forested terrain. Sci Data 13, 747 (2026). https://doi.org/10.1038/s41597-026-07101-w

מילות מפתח: תמונות אוויריות, זיהוי חריגות, חיפוש והצלה, שטח מיוער, מיקור המונים