Proiectul Fusion4D al Microsoft Research poate permite teleprezența imersivă de înaltă fidelitate
2 min. citit
Publicat în data de
Distribuiți acest articol
Îmbunătățiți acest ghid
Citiți pagina noastră de dezvăluire pentru a afla cum puteți ajuta MSPoweruser să susțină echipa editorială Află mai multe
Microsoft Research a dezvăluit recent detalii despre cel mai recent proiect al său numit Fusion4D, care este o nouă conductă pentru captarea performanței live multi-view, care generează reconstrucții coerente temporal de înaltă calitate în timp real. Algoritmul lor suportă atât reconstrucția incrementală, îmbunătățind estimarea suprafeței în timp, cât și parametrizând mișcarea scenei nerigide.
Abordarea noastră este foarte robustă atât pentru mișcarea cadru-la-cadru mare, cât și pentru schimbările de topologie, permițându-ne să reconstruim scene extrem de provocatoare. Demonstrăm avantaje față de tehnicile în timp real conexe care fie deformează un șablon generat online, fie fuzionează continuu datele de adâncime în mod nerigid într-un singur model de referință. În cele din urmă, arătăm rezultate de reconstrucție geometrică la egalitate cu metodele offline care necesită ordine de mărime mai mult timp de procesare și multe mai multe camere RGBD.
MSR consideră că această lucrare poate permite noi tipuri de experiențe de captare a performanțelor live, cum ar fi difuzarea de evenimente live, inclusiv sporturi și concerte în 3D, și, de asemenea, capacitatea de a captura oameni în direct și de a le reda în alte locații geografice pentru a permite imersivul de înaltă fidelitate. teleprezența. Aflați mai multe despre acest proiect de la Cercetare Microsoft.
De asemenea, este important de menționat că majoritatea cercetătorilor care au lucrat la acest proiect la Microsoft Research au părăsit compania pentru a înființa o nouă companie numită PerceptivIO. Găsiți mai jos lista cercetătorilor care au contribuit la acest proiect. Cu excepția lui Yury Degtyarev și Pushmeet Kohli, orice altă persoană se află acum PerceptivIO.
Mingsong Dou (2), Sameh Khamis (2), Yury Degtyarev (1), Philip Davidson (2) Sean Ryan Fanello (2), Adarsh Kowdle (2), Sergio Orts Escolano (2), Christoph Rhemann (2), David Kim (2), Jonathan Taylor (2), Pushmeet Kohli (1), Vladimir Tankovich (2), Shahram Izadi (2)
(1) Microsoft Research (2) perceptiveIO
