Il progetto Fusion4D di Microsoft Research può consentire la telepresenza immersiva ad alta fedeltà
2 minuto. leggere
Edizione del
Condividi questo articolo
Migliora questa guida
Leggi la nostra pagina informativa per scoprire come puoi aiutare MSPoweruser a sostenere il team editoriale Per saperne di più
Microsoft Research ha recentemente rivelato i dettagli sul suo ultimo progetto chiamato Fusion4D, una nuova pipeline per l'acquisizione di prestazioni multi-view dal vivo, che genera ricostruzioni di alta qualità temporalmente coerenti in tempo reale. Il loro algoritmo supporta sia la ricostruzione incrementale, migliorando la stima della superficie nel tempo, sia la parametrizzazione del movimento non rigido della scena.
Il nostro approccio è estremamente solido sia per i grandi movimenti da fotogramma a fotogramma che per i cambiamenti della topologia, consentendoci di ricostruire scene estremamente impegnative. Dimostriamo vantaggi rispetto alle tecniche in tempo reale correlate che deformano un modello generato online o fondono continuamente i dati di profondità in modo non rigido in un unico modello di riferimento. Infine, mostriamo risultati di ricostruzione geometrica alla pari con metodi offline che richiedono ordini di grandezza più tempo di elaborazione e molte più telecamere RGBD.
MSR ritiene che questo lavoro possa consentire nuovi tipi di esperienze di acquisizione di performance dal vivo, come la trasmissione di eventi dal vivo, inclusi sport e concerti in 3D, e anche la capacità di catturare gli esseri umani dal vivo e renderli nuovamente in altre località geografiche per consentire un'immersione ad alta fedeltà telepresenza. Scopri di più su questo progetto da Microsoft ricerca.
È anche importante notare che la maggior parte dei ricercatori che hanno lavorato a questo progetto presso Microsoft Research ha lasciato l'azienda per avviare una nuova società denominata PercettivoIO. Di seguito trovi l'elenco dei ricercatori che hanno contribuito a questo progetto. Fatta eccezione per Yury Degtyarev e Pushmeet Kohli, ora ci sono tutte le altre persone PercettivoIO.
Mingsong Dou (2), Sameh Khamis (2), Yury Degtyarev (1), Philip Davidson (2) Sean Ryan Fanello (2), Adarsh Kowdle (2), Sergio Orts Escolano (2), Christoph Rhemann (2), David Kim (2), Jonathan Taylor (2), Pushmeet Kohli (1), Vladimir Tankovich (2), Shahram Izadi (2)
(1) Microsoft Research (2) perceptiveIO
