NVIDIA präsentiert LATTE3D: AI-Modell für Text-zu-3D-Modell-Generierung
NVIDIA hat auf der GTC-Konferenz das LATTE3D Modell vorgestellt, eine neuartige generative KI, die Textbefehle in 3D-Modelle umwandeln kann. Innerhalb einer Sekunde generiert LATTE3D fotorealistische 3D-Objekte aus natürlicher Spracheingabe – bereit für den Einsatz in Spieleentwicklung, Design und Robotik.
Im Gegensatz zu bestehenden Text-zu-3D Systemen wie MVDream oder 3DTopia, liefert LATTE3D vergleichbare oder höhere Qualität in nur 400 Millisekunden. Dieser Geschwindigkeitsvorteil verspricht enorme Workflow-Optimierungen in 3D-lastigen Branchen. Man kann zunächst auf Geschwindigkeit statt Qualität setzen und später eine verfeinerte Version generieren lassen, anstatt von vornherein festgelegte Settings zu haben. Bisher ist LATTE3D auf Alltagsobjekte und Tiere trainiert, doch durch neue Datensätze lässt sich das Modell auf weitere Kategorien erweitern.
Die blitzschnelle 3D-Generierung aus Textbeschreibungen könnte viele Arbeitsabläufe verbessern. Anstatt 3D-Asset-Bibliotheken zu durchsuchen oder Objekte manuell zu modellieren, genügt bald eine einfache Texteingabe, um beliebige 3D-Inhalte in Rendering-Anwendungen zu importieren.
Zwar befindet sich LATTE3D noch in der Forschungsphase, doch NVIDIA plant bereits eine Erweiterung auf die Generierung von 4D-Animationen aus Text. Vorerst gibt es keine Ankündigung für einen kommerziellen Produktstart. Details zu der Arbeit finden Sie direkt bei NVIDIA.