kth.sePublikationer KTH
Ändra sökning
RefereraExporteraLänk till posten
Permanent länk

Direktlänk
Referera
Referensformat
  • apa
  • ieee
  • modern-language-association-8th-edition
  • vancouver
  • Annat format
Fler format
Språk
  • de-DE
  • en-GB
  • en-US
  • fi-FI
  • nn-NO
  • nn-NB
  • sv-SE
  • Annat språk
Fler språk
Utmatningsformat
  • html
  • text
  • asciidoc
  • rtf
Developing a mobile eye tracking solution using transfer learning
KTH, Skolan för elektroteknik och datavetenskap (EECS).
2021 (Engelska)Självständigt arbete på avancerad nivå (masterexamen), 20 poäng / 30 hpStudentuppsats (Examensarbete)
Abstract [en]

Gaze estimation, or eye- tracking, has a multitude of possible beneficial applications, such as help with device interaction and literacy testing which can increase access to technology and equality in education. Whereas most current methods are invasive and/or use expensive, task-specific equipment, the greatest benefits would be achieved with an inexpensive solution using widely available hardware. Recent studies have experimented with Convolutional Neural Networks (CNNs) and achieved promising results, nearing the performance of the other approaches. Limited efforts have gone into experimenting with transfer learning in the gaze estimation domain. This study investigates its use by determining if a model pretrained on a large, available-for-research dataset gathered on mobile phones and tablets can improve the performance on a small dataset with devices of newer generations. The results of the experiments show that there is a small though likely insignificant benefit in using transfer learning over training a model from scratch on the small dataset. The best model’s predictions are on average approximately 3 millimetres closer to the true values than the model trained from scratch on the small dataset (2.81 vs. 3.11 cm error). The best performance is achieved by pretraining on data that contains the same type of device as in the small dataset, but not necessarily target domain (in the case of this study, meaning the orientation of the device).  

Abstract [sv]

Ögonrörelsemätning, eller ögonspårning, bidrar till en mängd positiva tillämpningar, som till exempel ökad tillgänglighet genom ögonstyrning och jämlikhet i utbildning genom bättre utvärderingsmetoder. Medan de flesta nuvarande metoder är invasiva och /eller använder dyr, uppgiftsspecifik utrustning, skulle de största fördelarna uppnås med en billig lösning med hjälp av allmänt tillgänglig hårdvara. Nyligen genomförda studier har experimenterat med konvolutionella neurala nätverk (CNN) på bilder från mobilkameror och uppnått lovande resultat som närmar sig prestandan hos befintliga metoder. Få studier har däremot undersökt möjligheten till överföringsinlärning (“Transfer Learning”) för denna tillämpning. Denna studie undersöker detta genom att avgöra om en modell som är förtränad på en stor datamängd som samlats in på mobiltelefoner och surfplattor kan förbättra prestandan på en modell tränad på en liten datamängd med enheter från nyare generationer. Resultaten av experimenten visar att det finns en liten, men troligen försumbar, fördel med att använda överföringsinlärning jämfört med träning av en modell från grunden på en liten datamängd. Den bästa modellens förutsägelser är i genomsnitt 3 millimeter närmare de sanna värdena än modellen som tränas från grunden på den lilla datamängden (2,81 vs. 3,11 cm fel). Den bästa prestandan uppnås genom förträning på data som innehåller samma typ av enhet som i den lilla datamängden, men inte nödvändigtvis på enheter med samma orientering.

Ort, förlag, år, upplaga, sidor
2021. , s. 54
Serie
TRITA-EECS-EX ; 2021:722
Nyckelord [en]
Thesis, Computer Vision, Eye Tracking, Transfer Learning, Gaze Estimation
Nationell ämneskategori
Data- och informationsvetenskap
Identifikatorer
URN: urn:nbn:se:kth:diva-305274OAI: oai:DiVA.org:kth-305274DiVA, id: diva2:1614187
Externt samarbete
Lexplore AB
Handledare
Examinatorer
Tillgänglig från: 2021-11-25 Skapad: 2021-11-24 Senast uppdaterad: 2022-06-25Bibliografiskt granskad

Open Access i DiVA

Fulltext saknas i DiVA

Av organisationen
Skolan för elektroteknik och datavetenskap (EECS)
Data- och informationsvetenskap

Sök vidare utanför DiVA

GoogleGoogle Scholar

urn-nbn

Altmetricpoäng

urn-nbn
Totalt: 278 träffar
RefereraExporteraLänk till posten
Permanent länk

Direktlänk
Referera
Referensformat
  • apa
  • ieee
  • modern-language-association-8th-edition
  • vancouver
  • Annat format
Fler format
Språk
  • de-DE
  • en-GB
  • en-US
  • fi-FI
  • nn-NO
  • nn-NB
  • sv-SE
  • Annat språk
Fler språk
Utmatningsformat
  • html
  • text
  • asciidoc
  • rtf