Vi presenterar ett realtidsseendebaserat system som diskriminerar handgester som utförs av personer i fordonets framsäte för att komma åt infotainmentsystemet. Det handgesterbaserade visuella användargränssnittet kan vara mer naturligt och intuitivt för användaren än det nuvarande taktila interaktionsgränssnittet. Följaktligen kan det uppmuntra en blickfri interaktion, som kan lindra förarens distraktion utan att begränsa användarens infotainment erfarenhet. Systemet använder synliga och djupbilder av instrumentbrädan och mittkonsolområdet i fordonet. Det första steget i algoritmen använder representationen av bildområdet som ges av en modifierad histogram-of-orientedients deskriptor och en stödvektor maskin (SVM) för att klassificera om föraren, passagerare, eller ingen interagerar med regionen av intresse. Det andra steget extraherar gestegenskaper från temporal dynamik av de funktioner som härleds i det inledande steget, som sedan matas till en SVM för att utföra gest klassificering från en uppsättning av sex klasser av handgester. Den korrekta användarklassificeringen i en av de tre klasserna är i genomsnitt 97,9%. Den genomsnittliga klassificeringen av handgester för förare och passagerare som använder färg och djup är över 94 %. Dessa värden uppnåddes på insamlade data i fordon under varierande belysningsförhållanden och hos människor. Detta tillvägagångssätt visar genomförbarheten av det handgesterbaserade visuella användargränssnittet i fordon.
Även i REF föreslås en ram för gestigenkänning, baserad både på RGB- och djupdata; gester måste utföras i främre radens sätespassagerare och är utformade för att komma åt infotainmentsystemet.
Hand Gesture-based Visual User Interface for Infotainment
{'venue': 'AutomotiveUI', 'journal': None, 'mag_field_of_study': ['Engineering', 'Computer Science']}