kth.sePublications KTH
Change search
CiteExportLink to record
Permanent link

Direct link
Cite
Citation style
  • apa
  • ieee
  • modern-language-association-8th-edition
  • vancouver
  • Other style
More styles
Language
  • de-DE
  • en-GB
  • en-US
  • fi-FI
  • nn-NO
  • nn-NB
  • sv-SE
  • Other locale
More languages
Output format
  • html
  • text
  • asciidoc
  • rtf
A Cyber-Physical System for Hydrobatic AUVs: System Integration and Field Demonstration
KTH, School of Engineering Sciences (SCI), Engineering Mechanics, Vehicle Engineering and Solid Mechanics.ORCID iD: 0000-0002-5839-5573
KTH, School of Electrical Engineering and Computer Science (EECS), Intelligent systems, Robotics, Perception and Learning, RPL.ORCID iD: 0000-0001-8303-7826
KTH, School of Electrical Engineering and Computer Science (EECS), Intelligent systems, Robotics, Perception and Learning, RPL.ORCID iD: 0000-0001-5656-0259
KTH, School of Electrical Engineering and Computer Science (EECS), Intelligent systems, Robotics, Perception and Learning, RPL.ORCID iD: 0000-0003-1189-6634
Show others and affiliations
2020 (English)Conference paper, Published paper (Refereed)
Abstract [en]

Cyber-physical systems (CPSs) comprise a network of sensors and actuators that are integrated with a computing and communication core. Hydrobatic Autonomous Underwater Vehicles (AUVs) can be efficient and agile, offering new use cases in ocean production, environmental sensing and security. In this paper, a CPS concept for hydrobatic AUVs is validated in real-world field trials with the hydrobatic AUV SAM developed at the Swedish Maritime Robotics Center (SMaRC). We present system integration of hardware systems, software subsystems for mission planning using Neptus, mission execution using behavior trees, flight and trim control, navigation and dead reckoning. Together with the software systems, we show simulation environments in Simulink and Stonefish for virtual validation of the entire CPS. Extensive field validation of the different components of the CPS has been performed. Results of a field demonstration scenario involving the search and inspection of a submerged Mini Cooper using payload cameras on SAM in the Baltic Sea are presented. The full system including the mission planning interface, behavior tree, controllers, dead-reckoning and object detection algorithm is validated. The submerged target is successfully detected both in simulation and reality, and simulation tools show tight integration with target hardware.

Place, publisher, year, edition, pages
2020.
Keywords [en]
Cyber-physical systems; Behavior trees; Simulation; Mission planning; Field testing; System integration.
National Category
Robotics and automation Computer Sciences
Identifiers
URN: urn:nbn:se:kth:diva-282193DOI: 10.1109/auv50043.2020.9267947ISI: 000896378600064Scopus ID: 2-s2.0-85098527010OAI: oai:DiVA.org:kth-282193DiVA, id: diva2:1471564
Conference
IEEE OES Autonomous Underwater Vehicles Symposium, St. Johns, Newfoundland, Canada, 2020
Note

QC 20200929

Available from: 2020-09-29 Created: 2020-09-29 Last updated: 2026-02-27Bibliographically approved
In thesis
1. Hydrobatics: Efficient and Agile Underwater Robots
Open this publication in new window or tab >>Hydrobatics: Efficient and Agile Underwater Robots
2020 (English)Licentiate thesis, comprehensive summary (Other academic)
Alternative title[sv]
Hydrobatik: Effektiva och Smidiga Undervattensroboter
Abstract [en]

The term hydrobatics refers to the agile maneuvering of underwater vehicles. Hydrobatic capabilities in autonomous underwater vehicles (AUVs) can enable increased maneuverability without a sacrifice in efficiency and speed. This means innovative robot designs and new use case scenarios are possible. Benefits and technical challenges related to hydrobatic AUVs are explored in this thesis. The dissertation contributes to new knowledge in simulation, control and field applications, and provides a structured approach to realize hydrobatic capabilities in real world impact areas.

Three impact areas are considered - environmental monitoring, ocean production and security. A combination of agility in maneuvering and efficiency in performance is crucial for successful AUV applications. To achieve such performance, two technical challenges must be solved. First, these AUVs have fewer control inputs than degrees of freedom, which leads to the challenge of underactuation. The challenge is described in detail and solution strategies that use optimal control and model predictive control (MPC) are highlighted. Second, the flow around an AUV during hydrobatic maneuvers transitions from laminar to turbulent flow at high angles of attack. This renders flight dynamics modelling difficult. A full 0-360 degree envelope flight dynamics model is therefore derived, which combines a multi-fidelity hydrodynamic database with a generalized component-buildup approach. Such a model enables real-time (or near real-time) simulations of hydrobatic maneuvers including loops, helices and tight turns.

Next, a cyber-physical system (CPS) is presented -- it safely transforms capabilities derived in simulation to real-world use cases in the impact areas described. The simulator environment is closely integrated with the robotic system, enabling pre-validation of controllers and software before hardware deployment. The small and hydrobatic SAM AUV (developed in-house at KTH as part of the Swedish Maritime Robotics Center) is used as a test platform. The CPS concept is validated by using the SAM AUV for the search and detection of a submerged target in field operating conditions.

Current research focuses on further exploring underactuated control and motion planning. This includes development of real-time nonlinear MPC implementations running on AUV hardware, as well as intelligent control through feedback motion planning, system identification and reinforcement learning. Such strategies can enable real-time robust and adaptive control of underactuated systems. These ideas will be applied to demonstrate new capabilities in the three impact areas.

Abstract [sv]

Termen hydrobatik avser förmåga att utföra avancerade manövrer med undervattensfarkoster. Syftet är att, med bibehållen fart och räckvidd, utvigda den operationella förmågan i manövrering, vilket möjliggör helt nya användningsområden för maximering av kostnadseffektivitet. I denna avhandling undersöks fördelar och tekniska utmaningar relaterade till hydrobatik som tillämpas på undervattensrobotar, vanligen kallade autonoma undervattensfarkoster (AUV). Avhandlingen bidrar till ny kunskap i simulering, reglering samt tillämpning i experiment av dessa robotar genom en strukturerad metod för att realisera hydrobatisk förmåga i realistiska scenarier. 

Tre nyttoområden beaktas - miljöövervakning, havsproduktion och säkerhet. Inom dessa nyttoområden har ett antal scenarios identifierats där en kombination av smidighet i manövrerbarhet samt effektivitet i prestanda är avgörande för robotens förmåga att utföra sin uppgift. För att åstadkomma detta måste två viktiga tekniska utmaningar lösas. För det första har dessa AUVer färre styrytor/trustrar än frihetsgrader, vilket leder till utmaningen med underaktuering. Utmaningen beskrivs i detalj och lösningsstrategier som använder optimal kontroll och modellprediktiv kontroll belyses. För det andra är flödet runt en AUV som genomför hydrobatiska manövrar komplext med övergång från laminär till stark turbulent flöde vid höga anfallsvinklar. Detta gör flygdynamikmodellering svår. En full 0-360 graders flygdynamikmodell härleds därför, vilken kombinerar en multi-tillförlitlighets hydrodynamisk databas med en generaliserad strategi för komponentvis-superpositionering av laster. Detta möjliggör prediktering av hydrobatiska manövrar som t.ex. utförande av looping, roll, spiraler och väldigt snäva svängradier i realtids- eller nära realtids-simuleringar.

I nästa steg presenteras ett cyber-fysikaliskt system (CPS) – där funktionalitet som härrör från simuleringar kan överföras till de verkliga användningsområdena på ett effektivt och säkert sätt. Simulatormiljön är nära integrerad i robot-miljön, vilket möjliggör förvalidering av reglerstrategier och mjukvara innan hårdvaruimplementering. En egenutvecklad hydrobatisk AUV (SAM) används som testplattform. CPS-konceptet valideras med hjälp av SAM i ett realistiskt sceanrio genom att utföra ett sökuppdrag av ett nedsänkt föremål under fältförhållanden.

Resultaten av arbetet i denna licentiatavhandling kommer att användas i den fortsatta forskningen som fokuserar på att ytterligare undersöka och utveckla ny metodik för reglering av underaktuerade AUVer. Detta inkluderar utveckling av realtidskapabla ickelinjära MPC-implementeringar som körs ombord, samt AI-baserade reglerstrategier genom ruttplaneringsåterkoppling, autonom systemidentifiering och förstärkningsinlärning. Sådan utveckling kommer att tillämpas för att visa nya möjligheter inom de tre nyttoområdena.

Place, publisher, year, edition, pages
Stockholm: KTH Royal Institute of Technology, 2020. p. 59
Series
TRITA-SCI-FOU ; 2020:44
Keywords
Autonomous Underwater Vehicles, Modeling, Simulation, Control, Field Testing, Cyber-physical Systems., Autonoma Undervattensfarkoster (AUV), Modellering, Simulering, Reglerteknik, Fältprovning, Cyber-fysikaliska System(CPS).
National Category
Engineering and Technology
Research subject
Vehicle and Maritime Engineering
Identifiers
urn:nbn:se:kth:diva-286062 (URN)978-91-7873-721-5 (ISBN)
Presentation
2020-12-14, Live-streaming via Zoom: https://kth-se.zoom.us/webinar/register/WN_1iUGn5KkSJ-H0pCe1ZQLSA, Stockholm, 14:00 (English)
Opponent
Supervisors
Projects
SMaRC
Funder
Swedish Foundation for Strategic Research
Available from: 2020-11-19 Created: 2020-11-19 Last updated: 2022-06-25Bibliographically approved
2. Hydrobatics: Real-time Control, Simulation and Learning for Underactuated AUVs in Agile Maneuvers
Open this publication in new window or tab >>Hydrobatics: Real-time Control, Simulation and Learning for Underactuated AUVs in Agile Maneuvers
2023 (English)Doctoral thesis, comprehensive summary (Other academic)
Abstract [en]

The term hydrobatics refers to the agile maneuvering of underwater vehicles. Underwater robots such as autonomous underwater vehicles (AUVs) and remotely operated vehicles (ROVs) are either designed as flight style, optimized for range and speed, or hover style, optimized for precise maneuverability. Hydrobatic capabilities can help balance efficiency and maneuverability in these platforms, enabling innovative robot designs for impact areas in environmental monitoring, ocean production and security. This dissertation addresses technical challenges related to hydrobatic AUVs and contributes to new knowledge in real-time control, simulation, learning and planning. 

Hydrobatic AUVs are underactuated systems --- new strategies using nonlinear model predictive control (MPC) and behavior trees (BTs) are presented for efficient and safe real-time control of underactuated AUVs in agile maneuvers. Further, the flow around an AUV during such maneuvers transitions from laminar to turbulent flow at high angles of attack, rendering flight dynamics modelling difficult. A full 0-360 degree envelope flight dynamics model is therefore derived, which combines a multi-fidelity hydrodynamic database with a generalized component-buildup approach. Such a model enables real-time (or near real-time) simulations of hydrobatic maneuvers including loops, helices and tight turns. To increase the intelligence and robustness of such systems, data driven methods including physics-informed learning, Gaussian processes, sparse regression  and reinforcement learning are utilized to rapidly identify models of the system's dynamics and perform online adaptive control. To further enhance autonomy, informative path planning is also studied, where an adaptive sampling strategy combines AUV measurements and satellite data to track ocean fronts.

These hydrobatic capabilities are safely brought to the real world through a cyber-physical system (CPS). Simulator environments are closely integrated with the robotic system, enabling pre-validation of controllers and software before hardware deployment. The small and hydrobatic SAM AUV (SAM: Small and Affordable Maritime robot) developed in-house at KTH as part of the Swedish Maritime Robotics Centre (SMaRC) is used as a test platform. The CPS concept is demonstrated with the SAM AUV in applications including detecting underwater targets, inspecting seaweed farm infrastructure and tracking algal blooms using the presented simulation, planning and control strategies.

Abstract [sv]

Hydrobatik avser förmågan att utföra avancerade manövrar med undervattensfarkoster. Undervattensrobotar som autonoma undervattensfarkoster (AUV) är antingen optimerade för räckvidd och hastighet, eller optimerade för precisionsmanövrering. Hydrobatiska kapaciteter kan hjälpa till att balansera effektivitet och manövrerbarhet på dessa plattformar. Hydrobatik möjliggör innovativ robotdesign inom tre nyttoområden --- miljöövervakning, havsproduktion och säkerhet.I denna avhandling undersöks fördelar och tekniska utmaningar relaterade till hydrobatik. Avhandlingen bidrar till ny kunskap kring reglering, simulering, lärande och ruttplanering. Vidare tillämpas denna kunskap inom experiment av dessa robotar i realistiska scenarier.

Inom nämnda nyttoområden har ett antal scenarios identifierats där en kombination av manövrerbarhet samt räckvidd är avgörande för robotens förmåga att utföra sin uppgift. För att åstadkomma detta måste viktiga tekniska utmaningar lösas. För det första har dessa AUVer färre styrytor/trustrar än frihetsgrader, vilket leder till utmaning med underaktuering. Lösningsstrategier baserade på ickelinjär modelprediktiv kontroll (MPC) och beteendeträd (BTs) presenteras för effektiv och säker realtidskontroll av underaktuarande AUV:er i smidiga manövrar. För det andra är flödet runt en AUV som genomför hydrobatiska manövrar komplext. Övergången från laminärt till starkt turbulent flöde vid höga anfallsvinklar gör flygdynamikmodellering svår. En full 0-360 graders flygdynamikmodell härleds därför, vilken kombinerar en multi-tillförlitlighets hydrodynamisk databas med en generaliserad strategi för komponentvis-superpositionering av laster. Detta möjliggör prediktering av hydrobatiska manövrar som t.ex.  looping, roll, spiraler och väldigt snäva svängradier i realtids- eller nära realtids-simuleringar. För att öka intelligensen och robustheten hos sådana system används datadrivna metoder inklusive fysikinformerad inlärning, Gaussiska processer, sparsam regression och förstärkningsinlärning för att snabbt identifiera dynamiska modeller och utföra adaptiv kontroll i realtid. För att ytterligare förbättra autonomin studeras också informativ ruttplanering, där en adaptiv provtagningsstrategi kombinerar AUV-mätningar och satellitdata för att följa och mäta algblomningar och havsfrontar.

Dessa hydrobatiska förmågor överförs på ett säkert sätt till den verkliga världen genom ett cyberfysiskt system (CPS). Simulatormiljöer är integrerade med robotsystemet, vilket möjliggör förvalidering av styrenheter och mjukvara innan hårdvaruinstallation. Den lilla och hydrobatiska AUV:n SAM (SAM: Small and Affordable Maritime robot), egenutvecklad på KTH som en del av Swedish Maritime Robotics Centre, används som testplattform. CPS-konceptet demonstreras under fältförhållanden med SAM AUV. Applikationer inkluderar sökuppdrag av ett nedsänkt föremål, inspektioner av infrastruktur för havsbruk samt spårning av algblomning.

Place, publisher, year, edition, pages
Stockholm: KTH Royal Institute of Technology, 2023. p. 84
Series
TRITA-SCI-FOU ; 2023:44
Keywords
utonomous Underwater Vehicles, Underactuated Systems, Model Predictive Control, Hybrid Systems, Simulation, System Identification, Adaptive Sampling, Cyber-physical Systems., Autonoma Undervattensfarkoster (AUV), Modellering, Simulering, Modelprediktiv kontroll(MPC), Systemidentifiering, Adaptiv mätning, Fältförsök, Cyber-fysikaliska System(CPS).
National Category
Robotics and automation
Research subject
Vehicle and Maritime Engineering
Identifiers
urn:nbn:se:kth:diva-336526 (URN)978-91-8040-684-0 (ISBN)
Public defence
2023-10-06, https://kth-se.zoom.us/j/65770305868, Kollegiesalen, Brinellvägen 8, Stockholm, 14:00 (English)
Opponent
Supervisors
Funder
Swedish Foundation for Strategic Research
Available from: 2023-09-13 Created: 2023-09-12 Last updated: 2026-02-27Bibliographically approved

Open Access in DiVA

No full text in DiVA

Other links

Publisher's full textScopus

Authority records

Bhat, SriharshaTorroba, IgnacioÖzkahraman, ÖzerBore, NilsSprague, ChristopherXie, YipingStenius, IvanSeverholt, JosefineLjung, CarlFolkesson, JohnÖgren, Petter

Search in DiVA

By author/editor
Bhat, SriharshaTorroba, IgnacioÖzkahraman, ÖzerBore, NilsSprague, ChristopherXie, YipingStenius, IvanSeverholt, JosefineLjung, CarlFolkesson, JohnÖgren, Petter
By organisation
Vehicle Engineering and Solid MechanicsRobotics, Perception and Learning, RPLSchool of Engineering Sciences (SCI)
Robotics and automationComputer Sciences

Search outside of DiVA

GoogleGoogle Scholar

doi
urn-nbn

Altmetric score

doi
urn-nbn
Total: 999 hits
CiteExportLink to record
Permanent link

Direct link
Cite
Citation style
  • apa
  • ieee
  • modern-language-association-8th-edition
  • vancouver
  • Other style
More styles
Language
  • de-DE
  • en-GB
  • en-US
  • fi-FI
  • nn-NO
  • nn-NB
  • sv-SE
  • Other locale
More languages
Output format
  • html
  • text
  • asciidoc
  • rtf