Eventdetektering spelar en viktig roll i videoinnehållsanalysen. De befintliga funktionerna är dock fortfarande svaga i händelsedetektering eftersom: i) de flesta funktioner bara fånga vad som är involverat i en händelse eller hur händelsen utvecklas separat, och därmed inte helt kan beskriva händelsen; ii) för att fånga händelseutveckling information, används endast rörelsefördelning över hela ramen som visar sig vara bullriga i okonstruerade videor; iii) den uppskattade objektrörelse förvrängs vanligtvis av kamerarörelse. För att klara av dessa problem föreslår vi i detta dokument en ny rörelsefunktion, nämligen Expanded Relative Motion Histogram of Bag-ofVisual-Words (ERMH-BoW) att använda rörelse relativitet och visuell relativitet för händelsedetektering. I ERMH-BoW, genom att representera vilken aspekt av en händelse med Bag-of-VisualWords (BoW), konstruerar vi relativ rörelse histogram mellan visuella ord för att skildra objektets aktiviteter eller hur aspekten av händelsen. ERMH-BoW integrerar därmed både vad och hur aspekter för en fullständig händelsebeskrivning. Istället för rörelsefördelningsfunktioner används lokal rörelse av visuella ord som är mer diskriminerande i händelse av upptäckt. Samtidigt visar vi att genom att använda relativ rörelse, ERMH-BoW kan ärligt beskriva objektaktiviteter i en händelse oavsett varierande kamerarörelse. Dessutom, för att lindra det visuella ordet korrelationsproblem i BoW, föreslår vi en ny metod för att utöka den relativa rörelse histogrammet. Expansionen uppnås genom att sprida den relativa rörelsen mellan korrelerade visuella ord mätt med visuell relativitet. För att validera effektiviteten av den föreslagna funktionen, ERMH-BoW används för att mäta videoklipp likhet med Earth Movers distans (EMD) för händelsedetektering. Vi utför experiment för att upptäcka LSCOM händelser i TRECVID 2005 video corpus, och prestanda förbättras med 74% och 24% jämfört med befintliga rörelsedistribution funktion respektive BoW funktion.
Wang m.fl. REF har föreslagit en utvidgning av den BoW-representation som konstruerar relativa rörelsehistogram mellan visuella ord.
Video event detection using motion relativity and visual relatedness
{'venue': 'ACM Multimedia', 'journal': None, 'mag_field_of_study': ['Computer Science']}