NVIDIA Neuralangelo: KI generiert 3D-Modelle aus Videos

Forscher von Nvidia haben mit Neuralangelo ein KI-Modell vorgestellt, das aus 2D-Videosequenzen detaillierte 3D-Rekonstruktionen erstellt. Die Software kann Gebäude, Skulpturen und andere Objekte originalgetreu als 3D-Modell nachbilden.

Laut Nvidia sei Neuralangelo in der Lage, Oberflächenstrukturen und Materialien wie Dachziegel, Glas oder Marmor erstaunlich genau vom 2D-Video ins 3D-Modell zu übertragen. Die Qualität erleichtere Entwicklern und Kreativen die Erstellung nutzbarer digitaler Objekte anhand von Smartphone-Videos.

Anhand mehrerer Kameraperspektiven analysiert das System Form, Größe und Tiefe eines Objekts. Daraus entsteht zunächst ein grobes 3D-Modell, das dann in einem Optimierungsschritt verfeinert wird.

In Demos zeigte Nvidia unter anderem detaillierte Rekonstruktionen der David-Statue von Michelangelo, eines Lastwagens sowie Innen- und Außenbereiche von Gebäuden. Die Resultate können für VR, Digital Twins oder Robotik weiterverwendet werden.

Laut den Entwicklern übertrifft Neuralangelo bisherige Ansätze deutlich in der Abbildung feiner Details und Texturen. Die Qualität der automatischen 3D-Rekonstruktion könnte auch für die Erstellung von Druckdaten für den 3D-Druck interessant sein. Aufwendige händische 3D-Digitalisierung realer Objekte würde dadurch überflüssig.

KI-gestützte 3D-Modellierung direkt aus Videos könnte viele Workflows erleichtern. Aufwendige händische 3D-Digitalisierung wird dadurch teils überflüssig. Nvidias Ansatz zeigt, wie KI zunehmend auch kreativen Prozessen zuarbeitet.

AI Generatoren, die sich mit der Erstellung von 3D-Modellen beschäftigen, finden Sie hier.