Abstract-Vi presenterar en generisk och realtidsvariationspunkt cloud codec för 3D immersive video. Denna codec är lämplig för mixed reality applikationer där 3D-punkt moln förvärvas i snabb takt. I denna codec kodas intraramar gradvis i en octree underavdelning. För att ytterligare utnyttja interframe beroenden presenterar vi en interpredictional algoritm som partitionerar octree voxel utrymme i N × N × N makroblock (N = 8, 16, 32). Algoritmkoderna pekar i dessa block i den prediktiva ramen som en stel transform applicerad på punkterna i den intrakodade ramen. Den stela omvandlingen beräknas med hjälp av den iterativa närmaste punktalgoritmen och är kompakt representerad i ett quaternion quantization schema. För att koda färgattribut, definierade vi en kartläggning av färg per vertex attribut i den korsade oktree till en bild rutnät och använda äldre bildkodning metod baserat på JPEG. Som ett resultat av detta utvecklas en generisk komprimeringsram som lämpar sig för 3D-telemmersion i realtid. Detta ramverk har optimerats för att köras i realtid på hårdvara för både kodare och dekoder. Objektiv utvärdering visar att en högre frekvens-snedvridning prestanda uppnås jämfört med tillgängliga punktmoln codecs. En subjektiv studie i ett toppmodernt blandat verklighetssystem visar att de förutsägelser som introducerats är försumbara jämfört med de ursprungliga rekonstruerade punktmolnen. Dessutom visar det fördelen med rekonstruerade punktmoln video som en representation i 3D virtuella världen. Codec finns som öppen källkod för integration i immersiva och utökade kommunikationsapplikationer och fungerar som en basreferensplattform i JTC1/SC29/WG11 (MPEG) för vidareutveckling av standardiserade komprimeringslösningar för point-cloud.
Mekuria et al REF använde en blockbaserad metod för att beräkna en stel transform mellan kompatibla makroblock i på varandra följande ramar med hjälp av den iterativa närmaste punktalgoritmen.
Design, Implementation, and Evaluation of a Point Cloud Codec for Tele-Immersive Video
{'venue': 'IEEE Transactions on Circuits and Systems for Video Technology', 'journal': 'IEEE Transactions on Circuits and Systems for Video Technology', 'mag_field_of_study': ['Computer Science']}