Stable Video 3D
SV3D Synthèse de nouvelles vues multiples et génération 3D à partir d'une seule image en utilisant la diffusion vidéo latente
Listé dans les catégories:
VidéoModélisation 3DIntelligence artificielle
Description
SV3D est un modèle de diffusion vidéo latent pour la génération d'images multivues haute résolution à partir d'une image vers une vidéo orbitale autour d'un objet 3D. Il adapte le modèle de diffusion d'image vers vidéo pour la synthèse multivue et la génération 3D novatrice, en exploitant la généralisation et la cohérence multivue des modèles vidéo avec un contrôle de caméra explicite pour NVS. Il inclut également des techniques d'optimisation 3D améliorées pour la génération d'images en 3D.
Comment utiliser Stable Video 3D?
Pour utiliser SV3D, il suffit d'entrer une seule image et de laisser le modèle générer des images multivues novatrices et des modèles 3D. Utilisez le contrôle de caméra explicite pour une synthèse de vue personnalisée et exploitez les techniques d'optimisation 3D améliorées pour une génération 3D précise.
Fonctionnalités principales de Stable Video 3D:
1️⃣
Génération d'images multivues
2️⃣
Génération de modèles 3D
3️⃣
Synthèse de vue novatrice
4️⃣
Contrôle de caméra explicite
5️⃣
Optimisation 3D améliorée
Pourquoi pourrait-il être utilisé Stable Video 3D?
| # | Cas d'utilisation | Statut | |
|---|---|---|---|
| # 1 | Générer des images multivues à partir d'une seule image | ✅ | |
| # 2 | Créer des modèles 3D à partir d'images | ✅ | |
| # 3 | Améliorer la synthèse de vue novatrice | ✅ | |
Développé par Stable Video 3D?
Les créateurs de SV3D sont Vikram Voleti, ChunHan Yao, Mark Boss, Adam Letts, David Pankratz, Dmitrii Tochilkin, Christian Laforte, Robin Rombach et Varun Jampani. Ils ont développé SV3D pour des performances de pointe en matière de synthèse de vue novatrice et de génération 3D.