Detta dokument introducerar PhotoBook dataset, en storskalig samling av visuellt förankrade, uppgiftsorienterade dialoger på engelska utformade för att undersöka gemensam dialog historia ackumuleras under konversation. Med inspiration från det seminala arbetet med dialoganalys föreslår vi en datainsamlingsuppgift formulerad som ett samarbetsspel som föranleder två online-deltagare att hänvisa till bilder som använder både deras visuella sammanhang och tidigare etablerade referensuttryck. Vi ger en detaljerad beskrivning av arbetet och en grundlig analys av de 2 500 dialoger som samlats in. För att ytterligare illustrera de nya egenskaperna hos datasetet föreslår vi en referensmodell för referensupplösning som använder en enkel metod för att ta hänsyn till delad information som samlats in i en referenskedja. Våra resultat visar att denna information är särskilt viktig för att lösa senare beskrivningar och understryka behovet av att utveckla mer sofistikerade modeller för gemensam grund i dialoginteraktion.
Nyligen, PhotoBook Dataset har föreslagits för att undersöka delad dialog historia i konversation REF.
The PhotoBook Dataset: Building Common Ground through Visually-Grounded Dialogue
{'venue': 'ArXiv', 'journal': 'ArXiv', 'mag_field_of_study': ['Computer Science']}