Abstract-A kombination av fråge-för-visuell-exempel (QBVE) och semantisk hämtning (SR), betecknas som fråge-för-semantiskt-exempel (QBSE), föreslås. Bilder är märkta med avseende på en vokabulär av visuella begrepp, som är vanligt i SR. Varje bild representeras sedan av en vektor, som kallas en semantisk multinomial, av bakre begrepp sannolikheter. Retrieval är baserat på fråge-för-exempel paradigm: användaren ger en frågebild, för vilken 1) en semantisk multinomial beräknas och 2) matchas med de i databasen. QBSE visar sig ha två huvudegenskaper av intresse, den ena mestadels praktisk och den andra filosofisk. Ur praktisk synvinkel, eftersom det ärver generaliseringsförmågan hos SR inne i utrymmet för kända visuella begrepp (som kallas det semantiska rummet) men presterar mycket bättre utanför det, producerar QBSE hämtningssystem som är mer exakta än vad som tidigare var möjligt. Filosofiskt, eftersom det tillåter en direkt jämförelse av visuella och semantiska representationer under en gemensam frågeparadigm, QBSE möjliggör utformningen av experiment som uttryckligen testar värdet av semantiska representationer för bildsökning. Ett genomförande av QBSE under minimisannolikheten för fel (MPE) hämtning ram, tidigare tillämpas med framgång på både QBVE och SR, föreslås, och används för att demonstrera de två egenskaperna. Framför allt presenteras en omfattande objektiv jämförelse mellan QBSE och QBVE, vilket visar att den förstnämnda avsevärt överträffar den senare både inom och utanför det semantiska utrymmet. Genom att noggrant kontrollera strukturen i det semantiska utrymmet visas det också att denna förbättring endast kan tillskrivas den semantiska karaktären hos den representation som QBSE bygger på. Index Terms-Content-baserad bildsökning, Gaussiska blandningar, bildlikhet, flera instans lärande, fråga efter exempel, semantisk hämtning, semantiskt utrymme.
Utgångspunkten för detta arbete är sök-för-semantiskt-exempel hämtning paradigm av REF.
Bridging the Gap: Query by Semantic Example
{'venue': 'IEEE Transactions on Multimedia', 'journal': 'IEEE Transactions on Multimedia', 'mag_field_of_study': ['Computer Science']}