Présentation de TripoSR par Tripo et Stability AI : des modèles 3D de haute qualité en moins d’une seconde
GavinIntroduction
TripoSR, développé par Tripo et Stability AI, est un modèle open-source de pointe conçu pour une reconstruction 3D rapide à partir d’une seule image. Il génère des modèles 3D de haute qualité en moins d’une seconde, ce qui le rend adapté à diverses applications dans le divertissement, le jeu vidéo, la conception industrielle et l’architecture.
Performance
TripoSR peut créer des modèles 3D détaillés beaucoup plus rapidement que d’autres méthodes. Lorsqu’il est testé sur un Nvidia A100, il génère des sorties 3D de qualité brouillon (maillages texturés) en environ 0,5 seconde, surpassant d’autres modèles open source image vers 3D comme OpenLRM. En plus de sa vitesse, ce modèle est entièrement accessible aux utilisateurs avec ou sans GPU.
Spécifications
La préparation des données d’entraînement intègre diverses techniques de rendu de données qui reproduisent avec précision la distribution des images trouvées dans le monde réel, améliorant considérablement la capacité du modèle à généraliser. Elle sélectionne méticuleusement un sous-ensemble CC-BY de haute qualité du jeu de données Objaverse pour les données d’entraînement. Du côté du modèle, elle introduit plusieurs avancées techniques par rapport au modèle de base LRM model, notamment l’optimisation du nombre de canaux, la supervision des masques et une stratégie de rendu par recadrage plus efficace. Vous pouvez lire le technical report pour plus de détails.
TripoSR invite les développeurs, designers et créateurs à explorer ses capacités, à contribuer à son évolution et à découvrir son potentiel pour transformer leur travail et leurs industries.
Le code du modèle TripoSR est désormais disponible sur le GitHub de Tripo AI, et les poids du modèle sont disponibles sur Hugging Face. Veuillez consulter notre technical report pour plus de détails sur le modèle TripoSR.
