למידת חיזוק בייסיאנית לבקרה אדפטיבית של החרגה אנרגטית בזרועות מחפר הידראולי

למה מחפרים חכמים חשובים

מחפרים הידראוליים הם סוסי העבודה של הבנייה והכרייה, אך הם צורכים הרבה דיזל ובזבזים חלק גדול מהאנרגיה שמסופקת מהמנוע. כל שיפור בדרכי ניצול הכוח יכול לתורגם להורדת חשבונות הדלק של הקבלנים ולהפחתת הפליטות עבור כולם. המחקר הזה בוחן דרך חדשה לגרום לזרועות המחפר "לחשוב קדימה" לגבי שינויי קרקע ובלאי המכשיר, כך שיוכלו לשחזר ולהשתמש באנרגיה ביתר יעילות תוך שמירה על מגבלות בטיחות נוקשות.

חפירה מעמיסה על הדלק

מחפרים מודרניים לעיתים מפעילים את המערכות ההידראוליות בלחצים גבוהים וקבועים, בין אם הם חורצים בסלע קשה או שמחליקים בעדינות באדמה רופפת. הגישה האחידה הזו שומרת על אמינות המכונות אך מחריכה אנרגיה לחום, במיוחד במשימות קלות וכאשר הזרוע יורדת תחת משקלה העצמי. אף שבחלק מהעיצובים החדשים יש רכיבים שיכולים לקלוט אנרגיה עודפת במצברים הידראוליים, רוב המכונות עדיין מסתמכות על כללים פשוטים וקבועים כדי להחליט מתי וכיצד להשתמש בהם. התוצאה היא צריכת דלק שיכולה להיות גבוהה בכ־20% מהנדרש וטביעת פחמן גדולה יותר באתרי עבודה ברחבי העולם.

מערכת בקרה למידה לזרוע

המחברים מתכננים דגם וירטואלי מפורט של זרוע מחפר במשקל 21 טון, כולל הצילינדרים שלה, המשאבה, השסתומים ומצבר מלא בגז שאוגר אנרגיה כשהבום יורד ומשחרר אותה כדי לסייע בהרמת העומס מאוחר יותר. הבקר שלהם צריך להתמודד עם חוסר ודאויות מהעולם האמיתי: קרקע שהופכת קשה או רכה פתאום, שמן שמסמיך או מדלל עם הטמפרטורה, רכיבים שמתבלים לאט וחיישנים רעשניים או בעלי סטייה קלה. במקום להניח שהכל ידוע וקבוע, המערכת מתייחסת למצב האמיתי של המכונה כחלקית מוסתר ומעדכנת ברציפות את ההערכה הטובה ביותר באמצעות שיטות בייסיאניות. מסנן חלקיקים מעריך גורמים מוסתרים כגון עמידות הקרקע והאם המצבר טעון מעט יתר על המידה או מעט פחות מהנקודה העיצובית שלו.

להכשיר את המכונה להסתגל בבטחה

על גבי משקל המצב הזה, הצוות מאמן מדיניות למידת חיזוק (RL), אלגוריתם שמגלה בהדרגה אסטרטגיות טובות באמצעות ניסוי וטעייה בסימולציה. בכל רגע נתון המדיניות מקבלת את ה"אמונה" הנוכחית לגבי מצב המכשיר ובוחרת פקודות רציפות ללחץ המשאבה ולפתיחות השסתומים. שכבת בטיחות ייעודית בודקת אחר כך את ההצעות ומגבילה אותן לטווח בטוח וקפדני: הלחצים ההידראוליים חייבים להישאר בין 5 ל־35 מגה־פסקל בסך הכל, המצבר חייב להישאר בטווח של 12–28 מגה־פסקל ותנועות השסתומים מוגבלות כדי שלא יגרמו לזעזוע המערכת. תהליך הלמידה מעניק תגמול לבקר על סיום כל מחזור חפירה במהירות, שימוש במעט אנרגיה הידראולית ככל האפשר ושמירה על המיקום של הדלי במטרה, ובו־זמנית מטיל עונש על פעולות שדוחפות את המערכת לאזורי סיכון.

כמה טוב הבקר החכם מתפקד

החוקרים מריצים סימולציות משותפות נרחבות בקצב עדכון של 100 חידושים לשנייה, ומשווים את בקר ה־RL הבייסיאני שלהם לשתי תצורות מסורתיות יותר: אחת עם פרמטרים קבועים ואחת המדמה מפעיל מיומן שעושה התאמות ידניות פשוטות ללחץ ולמהירות. כל הבקרים מתמודדים עם אותו משימה מתוכננת של 20 דקות, שבה קשיי הקרקע משתנים במספר שלבים והשמן מתחמם מקור לקר. הבקר המבוסס למידה עוקב אחר שינויים בקרקע תוך שניות, מעלה לחץ כאשר האדמה נהיית קשה יותר כדי לשמור על זמנים יציבים למחזור ומוריד אותו כאשר החפירה נהיית קלה יותר כדי לחסוך באנרגיה וליצור הזדמנויות נוספות לטעון את המצבר. בעשרות ריצות אקראיות הוא מקטין את השימוש באנרגיה לכל מחזור חפירה בכ־20–22% לעומת הבקר הקבוע ובכ־14–18% לעומת הגרסה המותאמת על ידי מפעיל, תוך קיצור זמנים ושיפור הדיוק של הגעת הדלי ליעד. אירועי בטיחות, כגון לחצים המנסים לחרוג מהמגבלות או פתיחת שסתומי שחרור לפרקי זמן ארוכים, נעשים נדירים יותר אף שהמערכת דוחפת את הביצועים חזק יותר.

מה משמעות הדבר למכונות אמיתיות

לקריאה שאינה מקצועית, המסר המרכזי הוא שהזרוע של המחפר יכולה ללמוד להיות גם זהירה וגם חסכונית. על ידי עדכון מתמיד של הבנתה לגבי כמה קשה לחפור, עד כמה רכיביה בריאים וכמה אנרגיה מאוחסנת במצבר, הבקר מחליט בזמן אמת מתי לחסוך אנרגיה ומתי להוציא מעט יותר כדי לשמור על הפרודוקטיביות. המחקר עדיין מבוסס על סימולציה ולא על ניסויים שטחיים, וההתמקדות היא בגודל מכונה אחד, אך הוא מראה ששילוב הסקת מסקנות הסתברותית עם בקרה מבוססת למידה יכול להפוך ציוד כבד ליעיל יותר באופן משמעותי מבלי למסור את הבטיחות או המהירות. אם גישות דומות יועברו למחפרים אמיתיים, הן עשויות לעזור לקבלנים להזיז את אותו נפח אדמה עם פחות דלק, פחות בלאי ופחות פליטות.

ציטוט: Hu, P., Wen, T., Zhang, D. et al. Bayesian reinforcement learning for adaptive control of energy recuperation in hydraulic excavator arms. Sci Rep 16, 6195 (2026). https://doi.org/10.1038/s41598-026-35391-y

מילות מפתח: מחפר הידראולי, השבת אנרגיה, למידת חיזוק, בקרה בייסיאנית, יעילות מכונות כבדות