Das Fusion4D-Projekt von Microsoft Research kann immersive Telepräsenz mit hoher Wiedergabetreue ermöglichen
2 Minute. lesen
Veröffentlicht am
Teile diesen Artikel
Verbessern Sie diesen Leitfaden
Lesen Sie unsere Offenlegungsseite, um herauszufinden, wie Sie MSPoweruser dabei helfen können, das Redaktionsteam zu unterstützen Lesen Sie weiter
Microsoft Research enthüllte kürzlich Details zu seinem neuesten Projekt namens Fusion4D, einer neuen Pipeline für die Live-Multiview-Leistungserfassung, die zeitlich kohärente Rekonstruktionen in hoher Qualität in Echtzeit erzeugt. Ihr Algorithmus unterstützt sowohl die inkrementelle Rekonstruktion, wodurch die Oberflächenschätzung im Laufe der Zeit verbessert wird, als auch die Parametrisierung der nicht starren Szenenbewegung.
Unser Ansatz ist äußerst robust gegenüber großen Bild-zu-Bild-Bewegungen und Topologieänderungen, sodass wir extrem herausfordernde Szenen rekonstruieren können. Wir demonstrieren Vorteile gegenüber verwandten Echtzeittechniken, die entweder eine online generierte Vorlage verformen oder Tiefendaten kontinuierlich nicht starr zu einem einzigen Referenzmodell verschmelzen. Schließlich zeigen wir geometrische Rekonstruktionsergebnisse auf Augenhöhe mit Offline-Methoden, die um Größenordnungen mehr Verarbeitungszeit und viel mehr RGBD-Kameras erfordern.
MSR glaubt, dass diese Arbeit neue Arten von Live-Erfassungserlebnissen ermöglichen kann, wie z. B. die Übertragung von Live-Events wie Sport und Konzerte in 3D, und auch die Möglichkeit, Menschen live einzufangen und sie an anderen geografischen Orten erneut zu rendern, um immersive High-Fidelity-Erlebnisse zu ermöglichen Telepräsenz. Erfahren Sie mehr über dieses Projekt unter Microsoft-Forschung.
Es ist auch wichtig zu beachten, dass die meisten Forscher, die an diesem Projekt bei Microsoft Research gearbeitet haben, das Unternehmen verlassen haben, um ein neues Unternehmen mit dem Namen zu gründen EinfühlsamIO. Nachfolgend finden Sie die Liste der Forscher, die zu diesem Projekt beigetragen haben. Bis auf Yury Degtyarev und Pushmeet Kohli sind jetzt alle anderen dabei EinfühlsamIO.
Mingsong Dou (2), Sameh Khamis (2), Yury Degtyarev (1), Philip Davidson (2), Sean Ryan Fanello (2), Adarsh Kowdle (2), Sergio Orts Escolano (2), Christoph Rhemann (2), David Kim (2), Jonathan Taylor (2), Pushmeet Kohli (1), Vladimir Tankovich (2), Shahram Izadi (2)
(1) Microsoft Research (2) perceptiveIO
