אופטימיזציה של סופג מטאחומר ברוחב פס רחב באמצעות טכניקת למידת חיזוק TD3 (Twin Delayed Deep Deterministic Policy Gradient)

חומרי הוראה שברתים גלים

קישורים אלחוטיים מודרניים, טלוויזיית לוויין ומערכות רדאר תלויים בעיצוב גלים בלתי נראים בדיוק רב. מהנדסים מפתחים כיום "מטאחומרים" — משטחים מעוצבים זעירים — שיכולים לספוג אותות לא רצויים או לסובב את הקיטוב שלהם לתקשורת ברורה יותר ולהשמדה אלקטרונית. מאמר זה מראה כיצד צורת אינטליגנציה מלאכותית, למידת חיזוק, יכולה לגלות באופן אוטומטי עיצובים בעלי ביצועים גבוהים למבנים מורכבים אלה, לבצע בתוך שעות מה שעשוי אחרת לדרוש שבועות של ניסוי וטעייה של מומחים.

למה עיצוב גלים חשוב

מטאחומרים הם משטחים מהונדסים המורכבים מתבניות מיקרוסקופיות חזרתיות שמתקשרות עם גלים אלקטרומגנטיים באופן לא שגרתי. על‑ידי כוונון צורות וריווחים של התבניות האלה, חוקרים יכולים ליצור סופגים דקיקים מאוד שסופגים כמעט את כל הקרינה הנכנסת, או ממירים שמחליפים את קיטוב הגל — מה שמאפשר, למשל, להפוך אות אופקי לאנכי. התקנים כאלה חיוניים לצמצום חתימת רדאר, להקטנת הפרעות בין ערוצים ולהגברת קיבולת המידע בתדרים צפופים המשמשים מערכות לווין ואלחוט.

לתת לאלגוריתם לעצב

באופן מסורתי מהנדסים מכווננים עיצובים של מטאחומרים באמצעות סריקות פרמטרים ידניות או שיטות חיפוש היוריסטיות כמו אלגוריתמים גנטיים. גישות אלה יכולות להיות איטיות, תובעניות חישובית ורגישות לניחושים התחלתיים, במיוחד כשיש הרבה משתנים גיאומטריים לכוונון. המחברים במקום זאת פונים לשיטת למידת חיזוק בשם Twin Delayed Deep Deterministic Policy Gradient (TD3). בהגדרה זו, "סוכן" מלאכותי מציע סט של מידות גיאומטריות לתא המטאחומר, סימולטור פיזיקלי מעריך עד כמה העיצוב סופג או ממיר גלים בתחום תדרי היעד, והסוכן מקבל ציון רווחה (reward). באמצעות איטרציות של הצעה‑והערכה, הסוכן לומד בהדרגה אילו תבניות עובדות טוב מבלי להזדקק לנוסחאות מפורשות או למודלים סורוגט מאומנים מראש.

לבנות ספוג גלים טוב יותר

המבחן הראשון הוא סופג מיקרוגל אולטרה‑דק הבנוי משבילים בצורת L מנחושת מעל משטח מתכתי, המופרדים על ידי חומר לוח מעגלים רגיל. המטרה היא ספיגה חזקה — מעל 90 אחוז — על פני טווח תדרים רחב ככל האפשר ברצועות Ku ו‑K המשמשות לינקים לווין ורדאר. סוכן ה‑TD3 שולט בארבע תכונות גיאומטריות מרכזיות של התבנית ומתקשר ישירות עם סימולטור אלקטרומגנטי מסחרי. באופן מרשים, כבר לאחר 23 איטרציות האלגוריתם מתכנס לעיצוב שסופג יותר מ‑90% מהגלים הנכנסים בין 12.2 ל‑22.4 גיגה־הרץ, רוחב פס גדול יותר מאשר גרסאות מכוּוָנות ידנית או ממוטבות אלגוריתמית שהשתמשו באותה תצורת בסיס. ניסויים נוספים על סופג אור דיאלקטרי לחלוטין בתדרי אופטיקה מראים שהמסגרת הלימודית הזו יכולה לשפר גם שם את הביצועים, להרחיב את תחום השימוש ולהעלות את הספיגה הממוצעת.

להפוך את הקיטוב על פיו

המחברים מאתגרים אז את השיטה במשימה מורכבת יותר: לעצב משטח שמוחזר גלים תוך כדי החלפת קיטובם על פני טווח תדרים רחב. הם מתחילים מתבנית שכבתית יחידה המשלבת שבילי נחושת בצורת L עם משולש מרכזי על גבי אותו מצע דק וגיבוי מתכתי. שוב סוכן ה‑TD3 מכוונן את הפרטים הגיאומטריים. לאחר כ‑81 איטרציות הוא מוצא תצורה שממירה יותר מ‑90% מההספק המוחזר לקיטוב האורתוגונלי בין 11.8 ל‑24.2 גיגה‑הרץ — מכסה את כל רצועת ה‑Ku ואת רוב רצועת ה‑K. סימולציות מראות גם שההמרה הגבוהה הזו נשמרת עבור גלים הפוגעים במשטח בזוויות עד 50 מעלות, תכונה רצויה לאנטנות ומצעים אימפקטיים במציאות.

מהסימולציה אל שולחן המעבדה

כדי לבדוק שהעיצובים שנתגלו על‑ידי ה‑AI פרקטיים, הצוות מייצר את המשטח המומר‑קיטוב באמצעות פוטוליתוגרפיה סטנדרטית על מערך של 40 על 40 תאי יחידה. מדידות עם אנטנות קרן וניתוח רשת וקטוריאלית מאשרות החזרת קיטוב חוצה חזקה על פני כמעט אותו תחום שהסימולציות חזו, עם הבדלים צנועים בלבד שנובעים מהטולרנסים בייצור ומהגודל הסופי של הדגימה. בהשוואה למכשירים מדווחים אחרים, מבנה חד־שכבתי זה משיג רוחב פס ויעילות הדומים או טובים יותר, תוך שהוא נשאר קומפקטי וללא רכיבי מעגל נוספים.

מה משמעות הדבר לעתיד

על‑ידי הצגת יכולתה של סוכן למידת חיזוק TD3 להתמקד במהירות בעיצובים של מטאחומרים בעלי ביצועים גבוהים ומוכנים לייצור, עבודה זו מצביעה על דרך חדשה להנדסת התקנים ששולטים באור וגלי רדיו. במקום לחקור מגרשי עיצוב באופן ייסודי ובאופן ידני, חוקרים יכולים להגדיר מטרה — כגון ספיגה ברוחב פס רחב או המרה יציבה של קיטוב — ולתת לאלגוריתם הלומד לחפש בנוף העצום של האפשרויות. הגישה כללית מספיק כדי להתרחב מעבר לסופגים וממירים לקיטוב לרבים אחרים מרכיבים פוטוניים ומיקרוגליים, ובפוטנציאל להאיץ חדשנות בכל דבר מאנטנות דלות פרופיל ועד חיישנים אופטיים ומשטחים לקצירת אנרגיה.

ציטוט: Mahmoud, B.E., Ali, T.A., Obayya, S.S.A. et al. Optimization of broadband metamaterial absorber using twin delayed deep deterministic policy gradient reinforcement learning technique. Sci Rep 16, 12745 (2026). https://doi.org/10.1038/s41598-026-41716-8

מילות מפתח: סופג מטאחומר, ממיר קיטוב, עיצוב בלמידת חיזוק, מכשירי מיקרוגל ברוחב פס רחב, אופטימיזציה פוטונית