Stable Video 3D

Stable Video 3D (SV3D) ist ein revolutionäres generatives Modell, das Fortschritte im Bereich der 3D-Technologie antreibt. Ein Produkt von Stability AI, SV3D nutzt die Vielseitigkeit und Grundlage von Stable Video Diffusion, um erheblich verbesserte Qualität und Multi-View-Konsistenz zu bieten. Das Tool arbeitet mit einem höheren Leistungsniveau als sein Vorgänger, Stable Zero123 und andere Open-Source-Alternativen wie Zero123-XL. Das SV3D-Modell kommt in zwei Varianten. Der SV3D_u generiert Orbit-Videos von einzelnen Bild-Eingaben ohne Kamera-Konditionierung, während der SV3D_p eine höhere Funktionalität bietet, indem er sowohl einzelne Bilder als auch Orbit-Ansichten aufnimmt, wodurch die Erstellung von 3D-Videos entlang spezifizierter Kamera-Pfade ermöglicht wird. Durch Anpassung des Stable Video Diffusion Bild-zu-Video-Diffusionsmodells mit der Addition von Kamera-Pfad-Konditionierung ist das Tool darauf ausgelegt, Multi-View-Videos eines Objekts zu generieren. Diese Technik bietet erhebliche Vorteile in Bezug auf Generalisierung und Ansichtskonsistenz der generierten Outputs. Daher kann SV3D verwendet werden, um qualitativ hochwertige 3D-Meshes von einzelnen Bild-Eingaben auszugeben. Sowohl kommerzielle als auch nicht-kommerzielle Nutzung wird unterstützt. Die Modellgewichte sind auf Hugging Face herunterladbar und ein Forschungspapier ist für detailliertes Verständnis verfügbar. Stable Video 3D führt auch bedeutende Fortschritte in der Novel View Synthesis (NVS) und 3D-Generierung ein und liefert kohärente Ansichten aus jedem beliebigen Winkel mit kompetenter Generalisierung.