: Med ett enda foto som ingång (längst till vänster), skapar vi en 3D-animatable version av ämnet, som nu kan gå mot betraktaren (mitten). 3D-resultatet kan upplevas i förstärkt verklighet (höger); i resultatet ovan har användaren praktiskt taget hängt konstverket med en HoloLens headset och kan se karaktären ta slut från olika vyer. Se alla resultat i den kompletterande videon: https://youtu.be/G63goXc5MyU. Foto: wikiart.org. Vi presenterar en metod och tillämpning för att animera ett mänskligt ämne från ett enda foto. T.ex. kan karaktären gå ut, springa, sitta eller hoppa i 3D. De viktigaste bidragen i detta papper är: 1) en tillämpning av visning och animering av människor i enstaka bilder i 3D, 2) en ny 2D warping metod för att deformera en möjlig mall kropp modell för att passa personens komplexa siluett för att skapa en animatable mesh, och 3) en metod för att hantera partiella självocklusioner. Vi jämför med toppmoderna metoder och utvärderar resultat med mänskliga studier. Vidare presenterar vi ett interaktivt gränssnitt som tillåter återplacering av personen i 3D, och en förstärkt verklighetsuppställning där den animerade 3D-personen kan dyka upp från fotot till den verkliga världen. Vi demonstrerar metoden på bilder, affischer och konst. Projektsidan finns på https
Parallellt med vårt arbete, Weng et al. REF presenterar en metod för att animera en person i 3D från en enda bild baserad på SMPL-modellen och 2D-förvrängning.
Photo Wake-Up: 3D Character Animation From a Single Photo
{'venue': '2019 IEEE/CVF Conference on Computer Vision and Pattern Recognition (CVPR)', 'journal': '2019 IEEE/CVF Conference on Computer Vision and Pattern Recognition (CVPR)', 'mag_field_of_study': ['Computer Science']}