Enhanced AR: Integrating Haptic Feedback from Tactile Sensors for Immersive Teleoperation
2024 (English)Independent thesis Advanced level (degree of Master (Two Years)), 20 credits / 30 HE credits
Student thesisAlternative title
Förbättrad AR : Integration av Haptisk Äterkoppling från Taktila Sensorer för Immersiv Teleoperation (Swedish)
Abstract [en]
This thesis examines the integration of Augmented Reality (AR) and haptic feedback for teleoperation systems to enhance remote control precision and interaction. By constructing an AR teleoperation framework that utilizes tactile sensors, the project significantly improved operators’ ability to perform complex tasks with enhanced precision and realism, especially in handling delicate materials like glass. A user study demonstrated that haptic feedback not only reduces time costs but also speeds up the learning process, making the system more intuitive compared to traditional methods reliant solely on visual cues. However, the study also highlighted limitations such as the usage of non-real-time feedback and challenges with harder materials. Future work aims to incorporate real-time feedback and explore AR versus VR in teleoperation. This research contributes to interactive systems, showing potential benefits for industries that require enhanced immersion and efficiency in remote operations. The code for results analysis can be found at: https://drive.google.com/drive/folders/1V8SeTOVtP7xvebjIylaX9gTjxrPjKqbw?usp=drive_link.
Abstract [sv]
Denna avhandling undersöker integrationen av förstärkt verklighet (AR) och haptisk återkoppling i teleoperationssystem för att förbättra precision och interaktion vid fjärrstyrning. Genom att konstruera ett AR-teleoperationssystem som använder taktila sensorer, förbättrade projektet avsevärt operatörernas förmåga att utföra komplexa uppgifter med ökad precision och realism, särskilt vid hantering av känsliga material som glas. En användarstudie visade att haptisk återkoppling inte bara minskar tidskostnader utan också påskyndar inlärningsprocessen, vilket gör systemet mer intuitivt jämfört med traditionella metoder som enbart är beroende av visuella ledtrådar. Studien belyste dock även begränsningar såsom användningen av icke-realtidsåterkoppling och utmaningar med hårdare material. Framtida arbete syftar till att integrera återkoppling i realtid och utforska AR kontra VR i teleoperation. Denna forskning bidrar till interaktiva system och visar på potentiella fördelar för industrier som kräver förbättrad inlevelse och effektivitet i fjärroperationer.
Place, publisher, year, edition, pages
Stockholm: KTH Royal Institute of Technology , 2024. , p. 19
Series
TRITA-EECS-EX ; 2024:462
Keywords [en]
Augumented Reality, Robot Teleoperation, Haptic Feedback, Tactile sensor
Keywords [sv]
Förstärkt verklighet, Robotteleoperation, Haptisk återkoppling, Taktil sensor
National Category
Computer Sciences Computer and Information Sciences
Identifiers
URN: urn:nbn:se:kth:diva-351548OAI: oai:DiVA.org:kth-351548DiVA, id: diva2:1887669
Supervisors
Examiners
2024-09-232024-08-082025-02-18Bibliographically approved