kth.sePublikationer KTH
Ändra sökning
RefereraExporteraLänk till posten
Permanent länk

Direktlänk
Referera
Referensformat
  • apa
  • ieee
  • modern-language-association-8th-edition
  • vancouver
  • Annat format
Fler format
Språk
  • de-DE
  • en-GB
  • en-US
  • fi-FI
  • nn-NO
  • nn-NB
  • sv-SE
  • Annat språk
Fler språk
Utmatningsformat
  • html
  • text
  • asciidoc
  • rtf
A vision-language-guided and deep reinforcement learning-enabled approach for unstructured human-robot collaborative manufacturing task fulfilment
Hong Kong Polytech Univ, Dept Ind & Syst Engn, Hong Kong, Peoples R China..ORCID-id: 0000-0002-2329-8634
Hong Kong Polytech Univ, Dept Ind & Syst Engn, Hong Kong, Peoples R China..
Hong Kong Polytech Univ, Dept Ind & Syst Engn, Hong Kong, Peoples R China..
KTH, Skolan för industriell teknik och management (ITM), Produktionsutveckling, Industriella produktionssystem.ORCID-id: 0000-0001-8679-8049
2024 (Engelska)Ingår i: CIRP annals, ISSN 0007-8506, E-ISSN 1726-0604, Vol. 73, nr 1, s. 341-344Artikel i tidskrift (Refereegranskat) Published
Abstract [en]

Human-Robot Collaboration (HRC) has emerged as a pivot in contemporary human-centric smart manufacturing scenarios. However, the fulfilment of HRC tasks in unstructured scenes brings many challenges to be overcome. In this work, mixed reality head-mounted display is modelled as an effective data collection, communication, and state representation interface/tool for HRC task settings. By integrating vision-language cues with large language model, a vision-language-guided HRC task planning approach is firstly proposed. Then, a deep reinforcement learning-enabled mobile manipulator motion control policy is generated to fulfil HRC task primitives. Its feasibility is demonstrated in several HRC unstructured manufacturing tasks with comparative results.

Ort, förlag, år, upplaga, sidor
Elsevier BV , 2024. Vol. 73, nr 1, s. 341-344
Nyckelord [en]
Human-robot collaboration, Manufacturing system, Human-guided robot learning
Nationell ämneskategori
Produktionsteknik, arbetsvetenskap och ergonomi Robotik och automation
Identifikatorer
URN: urn:nbn:se:kth:diva-352248DOI: 10.1016/j.cirp.2024.04.003ISI: 001278260600001Scopus ID: 2-s2.0-85190754943OAI: oai:DiVA.org:kth-352248DiVA, id: diva2:1892741
Anmärkning

QC 20240827

Tillgänglig från: 2024-08-27 Skapad: 2024-08-27 Senast uppdaterad: 2025-02-05Bibliografiskt granskad

Open Access i DiVA

Fulltext saknas i DiVA

Övriga länkar

Förlagets fulltextScopus

Person

Wang, Lihui

Sök vidare i DiVA

Av författaren/redaktören
Zheng, PaiWang, Lihui
Av organisationen
Industriella produktionssystem
I samma tidskrift
CIRP annals
Produktionsteknik, arbetsvetenskap och ergonomiRobotik och automation

Sök vidare utanför DiVA

GoogleGoogle Scholar

doi
urn-nbn

Altmetricpoäng

doi
urn-nbn
Totalt: 168 träffar
RefereraExporteraLänk till posten
Permanent länk

Direktlänk
Referera
Referensformat
  • apa
  • ieee
  • modern-language-association-8th-edition
  • vancouver
  • Annat format
Fler format
Språk
  • de-DE
  • en-GB
  • en-US
  • fi-FI
  • nn-NO
  • nn-NB
  • sv-SE
  • Annat språk
Fler språk
Utmatningsformat
  • html
  • text
  • asciidoc
  • rtf