Vi föreslår en ny modell för att upptäcka visuella relationer, såsom "person ridning motorcykel" eller "flaska på bordet". Denna uppgift är ett viktigt steg mot en omfattande strukturerad bildförståelse som går längre än att upptäcka enskilda objekt. Vår huvudsakliga nyhet är en Box Uppmärksamhet mekanism som gör det möjligt att modellera parvisa interaktioner mellan objekt med hjälp av vanliga objekt upptäckt pipelines. Den resulterande modellen är konceptuellt ren, uttrycksfull och bygger på välmotiverade utbildnings- och prognosförfaranden. Till skillnad från tidigare föreslagna tillvägagångssätt introducerar vår modell inte heller några ytterligare komplexa komponenter eller hyperparametrar utöver dem som redan krävs av den underliggande detektionsmodellen. Vi genomför en experimentell utvärdering av två datauppsättningar, V-COCO och Open Images, som visar på starka kvantitativa och kvalitativa resultat.
Kolesnikov et al., REF föreslog en gemensam probabilistisk modell för att upptäcka visuella relationer.
Detecting Visual Relationships Using Box Attention
{'venue': '2019 IEEE/CVF International Conference on Computer Vision Workshop (ICCVW)', 'journal': '2019 IEEE/CVF International Conference on Computer Vision Workshop (ICCVW)', 'mag_field_of_study': ['Computer Science']}