Vi presenterar en ny form av interaktiv videoobjekt segmentering där några klick av användaren hjälper systemet att producera en fullständig spatio-temporal segmentering av objektet av intresse. Medan konventionella interaktiva rörledningar tar användarens initiering som utgångspunkt, visar vi värdet i systemet att ta ledningen även i initiering. I synnerhet, för en viss videoram, systemet förberäknar en rangordnad lista över tusentals möjliga segmenteringshypoteser (även kallade objekt region förslag) med bild och rörelse ledtrådar. Sedan tittar användaren på de högst rankade förslagen och klickar på objektgränsen för att skära bort felaktiga förslag. Denna process itererar (vanligtvis 2-3 gånger), och varje gång systemet reviderar den topprankade förslag som, tills användaren är nöjd med en resulterande segmentering mask. Slutligen, masken sprids över videon för att producera en spatio-temporal objektrör. På tre utmanande dataset ger vi omfattande jämförelser med både befintligt arbete och enklare alternativa metoder. Sammantaget den föreslagna Click Carving tillvägagångssätt ger en utmärkt balans av noggrannhet och mänsklig ansträngning. Det överträffar alla liknande snabba metoder, och är konkurrenskraftig eller bättre än de som kräver 2 till 12 gånger ansträngningen.
Klicka på Carving REF interaktivt uppdaterar resultatet av videoobjekt segmentering genom användardefinierade klick.
Click Carving: Segmenting Objects in Video with Point Clicks
{'venue': 'ArXiv', 'journal': 'ArXiv', 'mag_field_of_study': ['Computer Science']}