kth.sePublikationer
Ändra sökning
RefereraExporteraLänk till posten
Permanent länk

Direktlänk
Referera
Referensformat
  • apa
  • ieee
  • modern-language-association-8th-edition
  • vancouver
  • Annat format
Fler format
Språk
  • de-DE
  • en-GB
  • en-US
  • fi-FI
  • nn-NO
  • nn-NB
  • sv-SE
  • Annat språk
Fler språk
Utmatningsformat
  • html
  • text
  • asciidoc
  • rtf
Collecting Visually-Grounded Dialogue with A Game Of Sorts
KTH, Skolan för elektroteknik och datavetenskap (EECS), Intelligenta system, Tal, musik och hörsel, TMH.
KTH, Skolan för elektroteknik och datavetenskap (EECS), Intelligenta system, Tal, musik och hörsel, TMH.ORCID-id: 0000-0001-7327-3059
KTH, Skolan för elektroteknik och datavetenskap (EECS), Intelligenta system, Tal, musik och hörsel, TMH.ORCID-id: 0000-0002-8579-1790
2022 (Engelska)Ingår i: Proceedings of the 13th Conference on Language Resources and Evaluation / [ed] Calzolari, N Bechet, F Blache, P Choukri, K Cieri, C Declerck, T Goggi, S Isahara, H Maegaard, B Mazo, H Odijk, H Piperidis, S, European Language Resources Association (ELRA) , 2022, s. 2257-2268Konferensbidrag, Publicerat paper (Refereegranskat)
Abstract [en]

An idealized, though simplistic, view of the referring expression production and grounding process in (situated) dialogue assumes that a speaker must merely appropriately specify their expression so that the target referent may be successfully identified by the addressee. However, referring in conversation is a collaborative process that cannot be aptly characterized as an exchange of minimally-specified referring expressions. Concerns have been raised regarding assumptions made by prior work on visually-grounded dialogue that reveal an oversimplified view of conversation and the referential process. We address these concerns by introducing a collaborative image ranking task, a grounded agreement game we call “A Game Of Sorts”. In our game, players are tasked with reaching agreement on how to rank a set of images given some sorting criterion through a largely unrestricted, role-symmetric dialogue. By putting emphasis on the argumentation in this mixed-initiative interaction, we collect discussions that involve the collaborative referential process. We describe results of a small-scale data collection experiment with the proposed task. All discussed materials, which includes the collected data, the codebase, and a containerized version of the application, are publicly available.

Ort, förlag, år, upplaga, sidor
European Language Resources Association (ELRA) , 2022. s. 2257-2268
Nationell ämneskategori
Språkteknologi (språkvetenskaplig databehandling)
Identifikatorer
URN: urn:nbn:se:kth:diva-323116ISI: 000889371702039Scopus ID: 2-s2.0-85144393073OAI: oai:DiVA.org:kth-323116DiVA, id: diva2:1727580
Konferens
13th Conference on Language Resources and Evaluation, 20-25 June, Marseille, France, 2022
Anmärkning

Part of proceedings: ISBN 9791095546726

QC 20230125

Tillgänglig från: 2023-01-16 Skapad: 2023-01-16 Senast uppdaterad: 2023-10-30Bibliografiskt granskad

Open Access i DiVA

fulltext(1612 kB)25 nedladdningar
Filinformation
Filnamn FULLTEXT01.pdfFilstorlek 1612 kBChecksumma SHA-512
c9fe46f516f6afb30066c8404798f3a4b2d4534b574c2e668b3595e1016e4a5502626c7cd2c87957675c48723c3ea973e0b5c0b3b044b79f6ea8d0f7ca9e5810
Typ fulltextMimetyp application/pdf

Scopus

Person

Willemsen, BramKalpakchi, DmytroSkantze, Gabriel

Sök vidare i DiVA

Av författaren/redaktören
Willemsen, BramKalpakchi, DmytroSkantze, Gabriel
Av organisationen
Tal, musik och hörsel, TMH
Språkteknologi (språkvetenskaplig databehandling)

Sök vidare utanför DiVA

GoogleGoogle Scholar
Totalt: 25 nedladdningar
Antalet nedladdningar är summan av nedladdningar för alla fulltexter. Det kan inkludera t.ex tidigare versioner som nu inte längre är tillgängliga.

urn-nbn

Altmetricpoäng

urn-nbn
Totalt: 328 träffar
RefereraExporteraLänk till posten
Permanent länk

Direktlänk
Referera
Referensformat
  • apa
  • ieee
  • modern-language-association-8th-edition
  • vancouver
  • Annat format
Fler format
Språk
  • de-DE
  • en-GB
  • en-US
  • fi-FI
  • nn-NO
  • nn-NB
  • sv-SE
  • Annat språk
Fler språk
Utmatningsformat
  • html
  • text
  • asciidoc
  • rtf