Clear Sky Science · nl

Diepe versterkende leermethoden voor hulpbrontoewijzing en schaalbare numerologie in NR-U ingeschakelde multi-RAT HetNets

· Terug naar het overzicht

Waarom je toekomstige telefoon slimtere radiogolven nodig heeft

Terwijl we naar 6G bewegen, zullen onze telefoons, auto’s, fabrieksrobots en VR‑headsets allemaal concurreren om dezelfde onzichtbare hulpbron: het draadloze spectrum. Sommige apparaten hebben super‑snelle video nodig, andere vereisen reacties in een fractie van een seconde, en de gedeelde radiogolven zijn al druk bezet. Dit artikel onderzoekt hoe het combineren van nieuwe 5G/6G‑radiotechnologie met kunstmatige intelligentie veel meer prestaties kan halen uit zowel gelicentieerd als ongelicentieerd spectrum, waardoor veeleisende toepassingen vloeiend blijven draaien, zelfs in drukke steden en fabrieken.

Figure 1
Figure 1.

Veel diensten, één druk draadloos landschap

De netwerken van morgen moeten gelijktijdig zeer uiteenlopende behoeften bedienen. Enhanced Mobile Broadband (eMBB) drijft hogesnelheidstoepassingen zoals 4K‑streaming en virtual reality, terwijl Ultra‑Reliable Low‑Latency Communication (URLLC) veiligheidskritieke verbindingen ondersteunt, zoals zelfrijdende auto’s of industriële besturing, waar milliseconden tellen. In plaats van voor elke dienst een apart fysiek netwerk te bouwen, kunnen operators "slices" creëren—virtuele rijstroken op dezelfde radiohardware—elk afgestemd op één type dienst. De uitdaging is dat al deze slices nog steeds beperkt spectrum en basisstations delen, dus beslissen wie wanneer welke middelen krijgt is een complexe evenwichtsoefening.

Ongelicentieerd spectrum benutten

Om druk op gelicentieerde frequenties te verlichten, introduceerde 5G New Radio in ongelicentieerde banden (NR‑U), waardoor cellulaire basisstations naast Wi‑Fi rond 5 GHz en hoger kunnen werken. De auteurs bestuderen een heterogeen netwerk waarin een groot macro‑basisstation en meerdere kleine cellen zowel gelicentieerde NR als ongelicentieerde NR‑U gebruiken. Gebruikers kunnen op drie manieren verbinden: met een traditioneel NR‑kleincel, met een NR‑U‑kleincel, of via carrier aggregation die beide verbindingen combineert. Tegelijkertijd ondersteunt elke cel twee slices: één gericht op snelheid (eMBB) en de ander op ultra‑lage vertraging (URLLC). Het systeem moet ook de ongelicentieerde band eerlijk delen met nabijgelegen Wi‑Fi‑accesspoints, die om het kanaal concurreren volgens hun eigen regels.

Flexibele timing voor verschillende behoeften

Een belangrijk instrument in dit ontwerp is "schaalbare numerologie", een 5G‑functie die verandert hoe radiosignalen in tijd en frequentie worden gerangschikt. Grovere instellingen gebruiken kleinere frequentie‑spacing en langere tijdsloten, wat efficiënt is voor hoge datasnelheden maar langzaam reageert. Fijnere instellingen gebruiken grotere spacing en zeer korte sloten, die snel reageren en geschikt zijn voor vertraging‑gevoelige traffic, maar minder bits per slot vervoeren. Het artikel laat elke slice—snelheidsgericht of vertraging‑gericht—zijn eigen numerologie kiezen op zowel NR‑ als NR‑U‑verbindingen. Deze flexibiliteit vergroot de ruimte van mogelijke configuraties sterk, maar maakt handmatige afstemming vrijwel onmogelijk.

Het netwerk zichzelf laten aanpassen

Om deze complexiteit te beheersen, wenden de auteurs zich tot kunstmatige intelligentie. Ze modelleren de "tevredenheid" van gebruikers met een eenvoudige index die stijgt wanneer de datarate van een gebruiker boven een doel uitkomt of de vertraging onder een drempel daalt. Een diepe versterkende leermethode, een dueling deep Q‑network (DDQN), observeert de huidige belasting op elke slice en elke cel en leert vervolgens hoe het aandeel radiomiddelen en de numerologiekeuze per slice moet worden aangepast om de totale tevredenheid te maximaliseren. Daarbovenop laat een op spijt (regret) gebaseerd leeralgoritme gebruikers "hernadenken" over welk basisstation en welke modus (NR, NR‑U of gecombineerd) ze kiezen, en stuurt hen geleidelijk naar opties die historisch betere tevredenheid gaven. Het proces herhaalt zich: resource‑instellingen beïnvloeden gebruikersassociaties, die op hun beurt terugvoeden in de leerlus.

Figure 2
Figure 2.

Wat de simulaties laten zien

Met gedetailleerde wiskundige modellen van signaalkwaliteit, interferentie en Wi‑Fi‑kanaaldeling simuleert het team een dicht binnenklimaat met een macrocelle, drie kleine cellen en coëxisterende Wi‑Fi‑netwerken. Ze vergelijken hun intelligente multi‑radio, multi‑slice systeem met drie gangbare referenties: alleen NR‑netwerken, gemengde NR en Wi‑Fi zonder aggregatie, en LTE‑Wi‑Fi‑aggregatie (LWA). Over een breed scala aan aantallen gebruikers en servicemixen verhoogt de voorgestelde aanpak de gemiddelde gebruikerstevredenheid met maximaal ongeveer 70% ten opzichte van eenvoudigere schema’s. Het blijft robuust zelfs wanneer veel Wi‑Fi‑gebruikers om dezelfde ongelicentieerde kanalen concurreren, en het presteert beter dan meer traditionele optimalisatietechnieken zoals genetische algoritmen of eenvoudigere leermethoden.

Wat dit betekent voor dagelijkse gebruikers

Voor niet‑specialisten is de boodschap helder: slimmer, door AI aangestuurd beheer van hoe onze apparaten zowel gelicentieerd als ongelicentieerd spectrum delen, kan toekomstige 6G‑netwerken sneller en responsiever laten aanvoelen, zelfs in drukke omgevingen. Door capaciteit flexibel te verdelen tussen snelle video en ultra‑betrouwbare controlesignalen, realtime radioinstellingen te kiezen en te beslissen welk basisstation en welke frequentie elk apparaat gebruikt, houdt het voorgestelde systeem meer gebruikers vaker tevreden. Als dergelijke technieken in echte uitrol worden toegepast, kunnen ze ervoor zorgen dat je volgende generatie telefoon, auto of headset soepel werkt zonder enorme nieuwe exclusieve spectrumblokken nodig te hebben.

Bronvermelding: Elmosilhy, N.A., Elmesalawy, M.M., El-Haleem, A.M.A. et al. Deep reinforcement learning for resource allocation and scalable numerology in NR-U enabled multi-RAT HetNets. Sci Rep 16, 4768 (2026). https://doi.org/10.1038/s41598-026-36539-6

Trefwoorden: 6G-netwerkslicing, NR-U en Wi‑Fi coexistentie, diepe versterkende leermethoden, hulpbrontoewijzing, URLLC en eMBB