NeRF 3D: künstliche Intelligenz für hochrealistische Videos

Nehmen Sie vier Fotos desselben Objekts, derselben Person oder desselben Ortes auf. Die Technologie kombiniert sie so, dass ein 360-Grad-Video entsteht, wie es eine Drohne oder eine herkömmliche Kamera hätte aufnehmen können. Doch weder eine Drohne noch eine herkömmliche Kamera hat es aufgenommen. Das ist die Magie von NeRF 3D.

NeRF 3D: Was ist das?

Neural Radiance Field, kurz NeRF, ist eine Technologie zur Nachbildung von Räumen in 3D. Diese Nachbildung gelingt mit hervorragender Detailtreue, wodurch sich die Technologie in der Industrie leicht für die Gestaltung digitaler Zwillinge einsetzen lässt. Das ist jedoch nicht das einzige Anwendungsbeispiel.

Die NeRF-Technologie liefert bessere Ergebnisse als die Photogrammetrie, eine Technik, die anhand von Bildern eine dreidimensionale Darstellung eines Raums mit größtmöglicher Detailgenauigkeit erzeugt. Anders als die Photogrammetrie stützt NeRF seine „Magie“ auf künstliche Intelligenz und weitere technologische Innovationen, die es beispielsweise ermöglichen, einen Ort mit transparenten oder spiegelnden metallischen Objekten mit hervorragender Detailtreue wiederzugeben.

Instant NeRF

Instant NeRF ist ein NVIDIA-Produkt, das mithilfe künstlicher Intelligenz solche dreidimensionalen Szenen in Sekunden nachbildet. Das Ergebnis ist ein interaktives Video, das an die 360-Grad-Ansichten von Google Street View oder an Szenen für Virtual-Reality-Brillen erinnert.

Einsatzmöglichkeiten von NeRF

• Wie bereits erwähnt: die Erstellung industrieller digitaler Zwillinge.
• Erleichterung von RealityCapture-Arbeiten.
• Nachbildung von Städten, Gebäuden, öffentlichen Räumen …
• Erstellung von Sets für Film und Fernsehen.
• Gestaltung von Szenarien für Videospiele und immersive Erlebnisse mit Virtual-Reality-Brillen und Augmented-Reality-Anwendungen.
• Nachbildung von Schauplätzen für Fernsehnachrichten.
• Erzeugung der Innenansicht eines Hauses – ein Vorteil für die Immobilienbranche oder die Innenarchitektur.
• Integration mit Point Clouds: Das Bild wird über die Punktwolke gelegt, um präzise Arbeiten wie Raumvermessungen durchzuführen.

NeRF und Evergine

Das Evergine-Team erforscht seit Monaten die Möglichkeiten von NeRF, denn diese Technologie begeistert Kunden bei interaktiven Anwendungen, etwa in Museen oder in der Mode. Sie ist auch für die tägliche Arbeit hilfreich und trägt dazu bei, neue Geschäftsmöglichkeiten zu entdecken oder zu entwickeln – zum Beispiel durch industrielle digitale Zwillinge, die zeigen, wie ein Bauvorhaben voranschreitet oder wie sich Sensoren in Smart Cities einsetzen lassen.

Die Integration von NeRF in Evergine ist im folgenden Video zu sehen. Darin wird eine mit der Engine erstellte dreidimensionale Teekanne in den Innenhof eines Hauses eingefügt, der anhand mehrerer Bilder des Ortes nachgebildet wurde:

Zu den weiteren Fortschritten der letzten Monate gehört, zu zeigen, wie sich ein NeRF ausschneiden und auf die Darstellung eines einzelnen Objekts konzentrieren lässt – zum Beispiel ein Auto, das zuvor in einen Raum „eingebettet“ war und nun daraus herausgelöst werden kann, um es separat zu bearbeiten. Darüber hinaus haben wir eine äußerst realistische Darstellung der SpaceX-Startrampe entwickelt.

Die nächste Herausforderung ist ein bearbeitbares NeRF – ein NeRF, in dem Sie Elemente der Szene nach Belieben entfernen und verschieben können, um all Ihre Ziele zu erreichen. Bei Evergine arbeiten wir bereits daran, Sie damit so bald wie möglich zu begeistern.

Wenn Sie die Möglichkeiten von NeRF für Ihr Unternehmen – heute und in Zukunft – begeistern, schreiben Sie uns: Gemeinsam finden wir heraus, wie sich die Leistungsfähigkeit dieser Technologie optimal nutzen lässt, um Mitarbeiter und Kunden zu begeistern.