kth.sePublications
Change search
CiteExportLink to record
Permanent link

Direct link
Cite
Citation style
  • apa
  • ieee
  • modern-language-association-8th-edition
  • vancouver
  • Other style
More styles
Language
  • de-DE
  • en-GB
  • en-US
  • fi-FI
  • nn-NO
  • nn-NB
  • sv-SE
  • Other locale
More languages
Output format
  • html
  • text
  • asciidoc
  • rtf
Leveraging GPT-3 as a question generator in Swedish for High School teachers
KTH, School of Electrical Engineering and Computer Science (EECS).
KTH, School of Electrical Engineering and Computer Science (EECS).
2023 (English)Independent thesis Basic level (degree of Bachelor), 10 credits / 15 HE creditsStudent thesisAlternative title
Nyttja GPT-3 som frågegenerator på svenska för gymnasielärare (Swedish)
Abstract [en]

The purpose of this study was to improve education by leveraging GPT-3 as a teacher tool. To achieve this, a prototype website was created that uses GPT-3 for generating questions based on teacher input. The tool is meant for High School teachers and produces questions in Swedish. To assess GPT-3’ capability as a question generator, and what value this would provide as a teacher tool, expert interviews were conducted. The experts consisted of teachers and teacher students. The interviews resulted in quantitative and qualitative data. The quantitative data was used to assess the quality of the generated questions in terms of truthfulness, linguistic ability, relevance & pedagogical ability. The qualitative data was used to identify strengths and weaknesses of the prototype. Furthermore, a SWOT-analysis was made including these strengths and weaknesses, as well as opportunities and threats of implementing such a tool into education. The study concluded that GPT-3 can be used to generate high quality questions. Although the quality of the questions was not as good as teacher-created questions, it was sufficient for teachers as they would have used 85% of the generated questions. The SWOT-analysis concluded that the strengths outweigh the weaknesses, which makes the prototype valuable for teachers with its current performance. There are opportunities to implement tools like the prototype into education, but also opportunities to make these tools better with new technology. The identified threats are regulation by law, cost sensitivity of High Schools, and inadequate socio-technical integration.

Abstract [sv]

Syftet med denna studie var att förbättra utbildningen genom att använda GPT-3 som ett lärarverktyg. För att uppnå detta skapades en prototypwebbplats som använder GPT-3 för att generera frågor baserat på lärarens input. Verktyget är avsett för gymnasielärare och producerar frågor på svenska. För att bedöma GPT-3s förmåga som frågegenerator, och vilket värde detta skulle ge som lärarverktyg, genomfördes expertintervjuer. Experterna bestod av lärare och lärarstudenter. Intervjuerna resulterade i kvantitativa och kvalitativa data. Den kvantitativa datan användes för att bedöma kvaliteten på de genererade frågorna i med avseende på sanningsenlighet, språklig förmåga, relevans & pedagogisk förmåga. Den kvalitativa datan användes för att identifiera styrkor och svagheter hos prototypen. Vidare gjordes en SWOT-analys som inkluderar dessa styrkor och svagheter, samt möjligheter och hot med att implementera ett sådant verktyg i utbildningen. Studien drog slutsatsen att GPT-3 kan användas för att generera frågor av hög kvalitet. Även om kvaliteten på frågorna inte var lika bra som lärarskapande frågor räckte det för lärare eftersom de skulle ha använt 85% av de genererade frågorna. SWOT-analysen drog slutsatsen att styrkorna väger mer än svagheterna, vilket gör prototypen värdefull för lärare med sin nuvarande prestation. Det finns möjligheter att implementera verktyg som prototypen i utbildningen, men också möjligheter att göra dessa verktyg bättre med ny teknik. De identifierade hoten är lagreglering, kostnadskänslighet för gymnasieskolor och otillräcklig socioteknisk integration.

Place, publisher, year, edition, pages
2023. , p. 12
Series
TRITA-EECS-EX ; 2023:415
National Category
Computer and Information Sciences
Identifiers
URN: urn:nbn:se:kth:diva-334270OAI: oai:DiVA.org:kth-334270DiVA, id: diva2:1789082
Supervisors
Examiners
Available from: 2023-08-19 Created: 2023-08-17 Last updated: 2023-08-19Bibliographically approved

Open Access in DiVA

fulltext(533 kB)512 downloads
File information
File name FULLTEXT01.pdfFile size 533 kBChecksum SHA-512
fbb6ec701d67d5297dd89f201b68051e56a84f53a0b0b738c1399365db9c7991f9962bbcfe6c0ee8bf66463e2e3d8fe6273ce4e2eac8cd65e8367f3b82ca89e4
Type fulltextMimetype application/pdf

By organisation
School of Electrical Engineering and Computer Science (EECS)
Computer and Information Sciences

Search outside of DiVA

GoogleGoogle Scholar
Total: 518 downloads
The number of downloads is the sum of all downloads of full texts. It may include eg previous versions that are now no longer available

urn-nbn

Altmetric score

urn-nbn
Total: 1136 hits
CiteExportLink to record
Permanent link

Direct link
Cite
Citation style
  • apa
  • ieee
  • modern-language-association-8th-edition
  • vancouver
  • Other style
More styles
Language
  • de-DE
  • en-GB
  • en-US
  • fi-FI
  • nn-NO
  • nn-NB
  • sv-SE
  • Other locale
More languages
Output format
  • html
  • text
  • asciidoc
  • rtf