אופטימיזציית ביצועים מבוססת Soft Actor Critic למערכות רדיו קוגניטיבית בסיוע פני־השקפה אינטליגנטיים

אוויר חכם יותר לעולם אלחוטי צפוף

הטלפונים, החיישנים ובתי החכם שלנו מתחרים על אותו משאב בלתי נראה: גלי רדיו. ככל שמתקנים מחוברים רבים יותר, הניצול היעיל של ספקטרום מוגבל הופך לקריטי. מאמר זה בוחן שיטה חדשה להגברת שיעורי הנתונים של משתמשים בדרגה נמוכה מבלי לפגוע במשתמשים בעלי עדיפות גבוהה, על ידי שילוב "קירות חכמים" שמכוונים גלי רדיו יחד עם שיטת למידה מלאכותית המלמדת את הרשת כיצד להגדיר את עצמה.

שיתוף ללא צווח על השכנים

מערכות אלחוטיות מודרניות משתמשות לעתים במודל של "משתמש ראשי" ו"משתמש משני". למשתמשים ראשיים, כגון שירותים עם רישיון, יש זכות קדימה לשימוש בתדרים מסוימים. משתמשים משניים מורשים להשתמש בערוצי אותם תדרים רק אם הם שומרים על רמת ההפרעה מותרת. זוהי הרעיון המרכזי מאחורי רדיו קוגניטיבי: מכשירים החשים את סביבתם ומתאימים את עצמם כדי לנצל את הספקטרום ביעילות רבה יותר. האתגר הוא להעניק למשתמשים משניים קצבי נתונים טובים תוך כדי שמירה על כמעט אי־נראות כלפי המשתמשים הראשיים. גישות מסורתיות מסתמכות על עיבוד אות חכם בתחנת הבסיס בלבד, מה שמסבך במהירות את הבעיה ככל שהרשת מסורבלת יותר ומתווספות אנטנות.

כיפוף אותות עם פני־השקפה חכמים

המחברים מוסיפים כלי עוצמתי לתמהיל: פני־השקפה אינטליגנטיים. אלה פאנלים דקים המורכבים מהרבה אלמנטים פסיביים זעירים שיכולים לשנות את אופן ההחזרה של גלי הרדיו הנכנסים, בדומה לקיר של מראות שניתן לשלוט בהן עבור אותות אלחוטיים. על ידי בחירה מדויקת של תבנית ההחזרה, הפנים יכולות לכוון אנרגיה לעבר המשתמש המשני הרצוי ולהרחיק אותה ממקלטים ראשיים, לשפר ביצועים ללא הוספת הספק שידור. המאמר מנתח מערכת שבה תחנת בסיס עם הרבה אנטנות משרתת משתמשים משניים, בעוד מספר פאנלים משקפים מסייעים לעצב את מסלולי האותות בסביבה, בתנאי הפצה ריאליסטיים בטווח המילימטרי.

ללמד את הרשת לכוונן את עצמה

מציאת הצירוף הטוב ביותר של דפוסי קרן בתחנת הבסיס, הספק שידור ומיליוני הגדרות השתקפות זעירות היא בעיה מתמטית מלוכלכת. שיטות אופטימיזציה קלאסיות, כגון שיחול מכווני בלוקים (block coordinate descent), מטפלות בכך על ידי אלטרנטיבה בין קבוצות משתנים. אלה פועלות אך הופכות לאיטיות ומסורבלות ככל שהפאנלים גדלים או שהסביבה משתנה. במקום זאת, המחברים מציירים את המשימה כבעיית למידה לסוכן למידת חיזוק עמוקה המשתמש באלגוריתם soft actor‑critic (SAC). בסביבה זו הסוכן צופה במצב הערוצים הנוכחי, בשלבי ההשתקפות הקודמים ובכוח השידור, ואז מציע הגדרות השתקפות חדשות. הוא מקבל תגמול המבוסס בעיקר על שיעור הנתונים המושג למשתמש המשני, כל עוד ההפרעה למשתמשים הראשיים נשארת מתחת לסף המותר. במשך אינספור אינטראקציות מדומות הסוכן לומד מדיניות שממפה ישירות תצפיות לתצורות קרובות לאופטימום.

תוצאות בסימולציה ובחומרה

באמצעות סימולציות נרחבות בוחנים את הבקר המבוסס SAC מול קנה מידה מסורתי של block coordinate descent במגוון פרמטרים: שיעור נתונים להשגים למשתמשים משניים, השפעת מספר אלמנטים ופאנלים מחזירים, מגבלות הספק שידור ומגבלות הפרעה. המדיניות הנלמדת עוקבת בעקביות אחרי הבנצ'מרק או עוקפת אותו בשיעור הנתונים, במיוחד כשלפני־ההשקפה יש הרבה אלמנטים, בעוד שדורשת הרבה פחות חישובים איטרטיביים לאחר סיום האימון. המחקר מעריך גם זמן ריצה: עבור פני־השקפה קטנים, שיטות קלאסיות יכולות להיות מעט מהירות יותר, אך ככל שגודל המערכת גדל הגישה המבוססת למידה מתרחבת טוב יותר. לתמיכה בפריסה מעשית, המחברים תכננו, ייצרו ובדקו מערך אנטנות תחנת־בסיס בעל 16 אלמנטים הפועל מ־3 עד 7 גיגה־הרץ. מדידות מראות התאמה טובה, קורלציה נמוכה בין האנטנות ויעילות קרינה בערך 90%, המאששת שמערכת החומרה יכולה לתמוך בפעולה מרובת אנטנות תובענית.

מה משמעות הדבר עבור רשתות אלחוטיות עתידיות

במונחים יומיומיים, עבודה זו מראה כיצד שילוב פאנלים משקפים חכמים עם אלגוריתם למידה מאפשר למכשירים בעלי עדיפות נמוכה לשתף ספקטרום באופן אגרסיבי יותר מבלי להפריע לשירותים בעלי עדיפות גבוהה. במקום נוסחאות מעשה ידי אדם, הרשת לומדת כיצד לכוון ולעצב את האותות בעצמה, גם בסביבות מורכבות ובעזרת אלמנטים רבים הניתנים לשליטה. ככל שמערכות אלחוטיות יתפתחו מעבר ל‑5G, גישות מסוג זה יכולות לסייע לספק קצבי נתונים גבוהים יותר, כיסוי טוב יותר ושימוש יעיל יותר בספקטרום הנדיר, תוך שמירה על רמת הפרעה מבוקרת.

ציטוט: Ghallab, R., Abdrabo, A. & Elashry, I. Soft actor critic-based performance optimization for IRS-aided cognitive radio systems. Sci Rep 16, 14283 (2026). https://doi.org/10.1038/s41598-026-49465-4

מילות מפתח: רדיו קוגניטיבי, פני־השקפה אינטליגנטיים, למידת חיזוק עמוקה, שיתוף ספקטרום אלחוטי, soft actor critic