Abstract-Multiple sensorial media (mulsemedia) kombinerar flera medieelement som engagerar tre eller fler mänskliga sinnen, och som de flesta andra medieinnehåll, kräver stöd för leverans över befintliga nätverk. I detta dokument föreslås ett adaptivt ramverk för mulsemedia (ADAMS) för att leverera skalbara video- och sensordata till användare. Till skillnad från befintliga tvådimensionella lösningar för gemensam källkodskanalanpassning för videoströmning innehåller ADAMS-ramverket tre gemensamma anpassningsdimensioner: videokälla, sensorkälla och nätverksoptimering. Med hjälp av en MPEG-7 beskrivningsschema, ADAMS rekommenderar integration av flera sensoriska effekter (dvs. haptisk, olfaction, luft rörelse, etc.) som metadata till multimediaströmmar. ADAMS-designen omfattar både grova och finkorniga anpassningsmoduler på serversidan: mulsemediaflödesanpassning och paketprioritetsplanering. Återkoppling från subjektiv kvalitetsbedömning och nätverksförhållanden används för att utveckla de två modulerna. Subjektiv utvärdering undersökte användarnas glädjenivåer när de exponerades för mulsemedia och multimedia sekvenser, respektive att studera användarnas preferensnivåer av vissa sensoriska effekter i samband med mulsemedia sekvenser med videokomponenter på olika kvalitetsnivåer. Resultaten av den subjektiva studien informerar om riktlinjer för en adaptiv strategi som väljer den optimala kombinationen för videosegment och sensordata för en given bandbreddsbegränsning och användarkrav. Användarperceptuella tester visar hur ADAMS överträffar befintliga multimedialeveranslösningar både vad gäller användarupplevd kvalitet och användarnöjdhet under adaptiv streaming av olika mulsemediainnehåll. I samband med detta betonas behovet av skräddarsydda, adaptiva mulsemedia-leveranser över traditionella, anpassningsbara transportmekanismer för multimedia. Index Terms-Mulsemedia, erfarenhetskvalitet, subjektiv testning.
Så vitt författarna vet, bara Yuan m.fl. Utforska adaptiv mulsemedia och föreslå en ADAptive MulSemedia Delivery Solution (ADAMS) REF för att leverera skalbara video- och sensordata till användare genom tre gemensamma anpassningsmått: video, sensoriell källa och nätverksoptimering.
Beyond Multimedia Adaptation: Quality of Experience-Aware Multi-Sensorial Media Delivery
{'venue': 'IEEE Transactions on Multimedia', 'journal': 'IEEE Transactions on Multimedia', 'mag_field_of_study': ['Computer Science']}