Tillgången till databaser med bilder märkta med nyckelord är nödvändig för att utveckla och utvärdera bildanmärkningsmodeller. Dataset insamling är dock en kostsam och tidskrävande uppgift. I detta dokument utnyttjar vi den stora resursen av bilder som finns på webben. Vi skapar en databas med bilder som är naturligt inbäddade i nyhetsartiklar och föreslår att använda deras bildtexter som en proxy för annotering sökord. Experimentella resultat visar att en bildanmärkningsmodell kan utvecklas enbart på detta dataset utan omkostnaderna för manuell annotering. Vi visar också att nyhetsartikeln i samband med bilden kan användas för att öka bildanteckningarnas prestanda.
Till exempel, REF utveckla en bild annotation modell på en datauppsättning av bilder naturligt inbäddade i nyhetsartiklar och visa att använda bildtexter som en proxy för annotation nyckelord kan ta bort overhead av manuell annotation, och också visa att nyhetsartikeln i samband med bilden kan användas för att öka bild annotation prestanda.
Automatic Image Annotation Using Auxiliary Text Information
{'venue': 'Annual Meeting Of The Association For Computational Linguistics', 'journal': None, 'mag_field_of_study': ['Computer Science']}