kth.sePublikationer KTH
Ändra sökning
RefereraExporteraLänk till posten
Permanent länk

Direktlänk
Referera
Referensformat
  • apa
  • ieee
  • modern-language-association-8th-edition
  • vancouver
  • Annat format
Fler format
Språk
  • de-DE
  • en-GB
  • en-US
  • fi-FI
  • nn-NO
  • nn-NB
  • sv-SE
  • Annat språk
Fler språk
Utmatningsformat
  • html
  • text
  • asciidoc
  • rtf
Learning Based Dynamic Cluster Reconfiguration for UAV Mobility Management with 3D Beamforming
KTH, Skolan för elektroteknik och datavetenskap (EECS), Datavetenskap, Kommunikationssystem, CoS. Princeton University, Department of Electrical and Computer Engineering, USA.ORCID-id: 0000-0001-5298-7490
Princeton University, Department of Electrical and Computer Engineering, USA.
KTH, Skolan för elektroteknik och datavetenskap (EECS), Datavetenskap, Kommunikationssystem, CoS, Radio Systems Laboratory (RS Lab).ORCID-id: 0000-0001-8517-7996
Airbus Central Research and Technology, Munich, Germany.
Visa övriga samt affilieringar
2024 (Engelska)Ingår i: 2024 IEEE International Conference on Machine Learning for Communication and Networking, ICMLCN 2024, Institute of Electrical and Electronics Engineers Inc. , 2024, s. 486-491Konferensbidrag, Publicerat paper (Refereegranskat)
Abstract [en]

In modern cell-less wireless networks, mobility management is undergoing a significant transformation, transitioning from single-link handover management to a more adaptable multi-connectivity cluster reconfiguration approach, including often conflicting objectives like energy-efficient power allocation and satisfying varying reliability requirements. In this work, we address the challenge of dynamic clustering and power allocation for unmanned aerial vehicle (UAV) communication in wireless interference networks. Our objective encompasses meeting varying reliability demands, minimizing power consumption, and reducing the frequency of cluster reconfiguration. To achieve these objectives, we introduce a novel approach based on reinforcement learning using a masked soft actor-critic algorithm, specifically tailored for dynamic clustering and power allocation.

Ort, förlag, år, upplaga, sidor
Institute of Electrical and Electronics Engineers Inc. , 2024. s. 486-491
Nationell ämneskategori
Datavetenskap (datalogi)
Identifikatorer
URN: urn:nbn:se:kth:diva-353545DOI: 10.1109/ICMLCN59089.2024.10625071ISI: 001307813600082Scopus ID: 2-s2.0-85202431643OAI: oai:DiVA.org:kth-353545DiVA, id: diva2:1899220
Konferens
1st IEEE International Conference on Machine Learning for Communication and Networking, ICMLCN 2024, Stockholm, Sweden, May 5 2024 - May 8 2024
Anmärkning

QC 20240926

Part of ISBN [9798350343199]

Tillgänglig från: 2024-09-19 Skapad: 2024-09-19 Senast uppdaterad: 2025-01-02Bibliografiskt granskad
Ingår i avhandling
1. AI Assisted Mobility Management for Cellular Connected UAVs
Öppna denna publikation i ny flik eller fönster >>AI Assisted Mobility Management for Cellular Connected UAVs
2025 (Engelska)Doktorsavhandling, sammanläggning (Övrigt vetenskapligt)
Abstract [en]

Unmanned Aerial Vehicles (UAVs) connected to cellular networks, i.e., cellular-connected UAVs, introduce unique challenges and opportunities in mobility management that distinguish them from terrestrial users. This thesis presents a comprehensive approach for optimizing UAV integration into cellular networks.

We first investigate the distinct mobility management needs for cellular-connected UAVs. Unlike terrestrial mobility management, which primarily focuses on preventing radio link failures at cell edges, UAVs experience fragmented and overlapping coverage, often with line-of-sight visibility to multiple ground base stations (BSs). Consequently, UAV mobility management must address not only link stability but also the minimization of unnecessary handovers with sustained service availability, particularly in uplink scenarios.To tackle these challenges, we propose two solutions, a model-based handover parameter optimization algorithm and a model-free deep reinforcement learning (DRL) based handover algorithm, both designed specifically for UAV mobility management.We extend the problem by integrating UAV path planning with wireless objectives, including interference management, delay reduction, and minimized handovers. This results in a joint optimization framework for UAV trajectory planning, handover management, and radio resource allocation. To solve this multi-objective problem, we develop a multi-agent DRL algorithm that combines mission-specific trajectory planning with network-driven adjustments, optimizing resource allocation and handover transitions.

Furthermore, we address mobility management in multi-connectivity scenarios where UAVs are served by clusters of distributed BSs. As UAVs move, the serving BS clusters must be dynamically reconfigured, necessitating coordinated resource allocation under stringent and time-sensitive reliability constraints. We propose a centralized, fully distributed, and hierarchical DRL-based approaches to achieve reliable connectivity, reduce power consumption, and minimize cluster reconfiguration frequency.

Lastly, to evaluate a network’s capability to support range-based localization for cellular-connected UAVs, we introduce an analytical framework. This framework defines B-localizability as the probability of a UAV receiving sufficient localization signals from at least B ground BSs, meeting a specific Signal-to-Interference-plus-Noise Ratio (SINR) threshold. By incorporating UAV parameters within a three-dimensional environment, we provide insights into localizability factors such as distance distributions, path loss, interference, and SINR. 

Abstract [sv]

Obemannade luftfarkoster (UAV:er) som är anslutna till mobilnätverk medför unika utmaningar och möjligheter inom mobilitetshantering som skiljer sig från dem för markbundna användare. Denna avhandling presenterar ett omfattande tillvägagångssätt för att optimera UAV-integration med mobilnätverk.

Vi undersöker först de särskilda behoven av mobilitetshantering för cellulärt anslutna UAV:er. Till skillnad från mobilitetshantering för markanvändare, som främst fokuserar på att förhindra radiolänkfel vid cellkanter, upplever UAV:er fragmenterad och överlappande täckning med siktlinje till flera markbasstationer (BS:er). Därför måste mobilitetshanteringen för UAV:er inte bara hantera länkstabilitet utan även minimera onödiga överlämningar och säkerställa bibehållen tjänstetillgänglighet, särskilt i uppströmskommunikation.

För att hantera dessa utmaningar föreslår vi både modellbaserade och modellfria algoritmer specifikt utformade för UAV-mobilitetshantering. Vi utökar problemet genom att integrera UAV-ruttplanering med trådlösa mål, inklusive störningshantering, minskad fördröjning och minimerade överlämningar. Detta resulterar i en gemensam optimeringsram för UAV-ruttplanering, överlämningshantering och radioresurstilldelning. För att lösa detta multiobjektivproblem utvecklar vi en algoritm baserad på djup förstärkningsinlärning (DRL) som kombinerar uppdragsbaserad ruttplanering med nätverksdrivna justeringar, vilket optimerar resursallokering och överlämningshantering.

Vidare behandlar vi mobilitetshantering i multikonnektivitetsscenarier där UAV:er betjänas av kluster av distribuerade basstationer. När UAV:er rör sig måste de servande BS-klustren dynamiskt omkonfigureras, vilket kräver samordnad resursallokering under strikta och tidskänsliga tillförlitlighetskrav. Vi föreslår ett centraliserat, fullt distribuerat och hierarkiskt DRL-baserat tillvägagångssätt för att uppnå tillförlitlig anslutning, minska strömförbrukningen och minimera frekvensen av klusteromkonfigureringar.

Slutligen, för att utvärdera nätverkets förmåga att stödja positionsbaserad lokalisering för cellulärt anslutna UAV:er, introducerar vi en analytisk ram. Denna ram definierar B-lokaliserbarhet som sannolikheten för att en UAV tar emot tillräckliga lokaliseringssignaler från minst B markbasstationer, som uppfyller en specifik signal-till-interferens-plus-brusförhållande (SINR) tröskel. Genom att inkludera UAV-parametrar i en tredimensionell miljö tillhandahåller vi insikter om lokaliserbarhetsfaktorer som distansfördelningar, dämpning, interferens och SINR. 

Ort, förlag, år, upplaga, sidor
Sweden: KTH Royal Institute of Technology, 2025. s. 224
Serie
TRITA-EECS-AVL ; 2025:10
Nyckelord
Unmanned aerial vehicles, Reinforcement Learning, Wireless networks, Reliability, Air-to-ground channel, Mobility management, Han dover, Unmanned aerial vehicles, Reinforcement Learning, Wireless networks, Reliability, Air-to-ground channel, Mobility management, Handover
Nationell ämneskategori
Kommunikationssystem Teknik och teknologier
Forskningsämne
Telekommunikation
Identifikatorer
urn:nbn:se:kth:diva-358036 (URN)978-91-8106-164-2 (ISBN)
Disputation
2025-01-31, https://kth-se.zoom.us/j/61632995144, Ka-Sal C, Kistangangen 16, Kista, 10:00 (Engelska)
Opponent
Handledare
Forskningsfinansiär
Vinnova
Anmärkning

QC 20250102

Tillgänglig från: 2025-01-02 Skapad: 2025-01-02 Senast uppdaterad: 2025-01-27Bibliografiskt granskad

Open Access i DiVA

Fulltext saknas i DiVA

Övriga länkar

Förlagets fulltextScopus

Person

Meer, Irshad AhmadÖzger, MustafaCavdar, Cicek

Sök vidare i DiVA

Av författaren/redaktören
Meer, Irshad AhmadÖzger, MustafaCavdar, Cicek
Av organisationen
Kommunikationssystem, CoSRadio Systems Laboratory (RS Lab)
Datavetenskap (datalogi)

Sök vidare utanför DiVA

GoogleGoogle Scholar

doi
urn-nbn

Altmetricpoäng

doi
urn-nbn
Totalt: 89 träffar
RefereraExporteraLänk till posten
Permanent länk

Direktlänk
Referera
Referensformat
  • apa
  • ieee
  • modern-language-association-8th-edition
  • vancouver
  • Annat format
Fler format
Språk
  • de-DE
  • en-GB
  • en-US
  • fi-FI
  • nn-NO
  • nn-NB
  • sv-SE
  • Annat språk
Fler språk
Utmatningsformat
  • html
  • text
  • asciidoc
  • rtf