Представляем TripoSR от Tripo и Stability AI: Высококачественные 3D-модели менее чем за секунду

Введение

TripoSR, разработанная Tripo и Stability AI, — это передовая модель с открытым исходным кодом, предназначенная для быстрой 3D-реконструкции из одного изображения. Она генерирует высококачественные 3D-модели менее чем за секунду, что делает ее подходящей для различных применений в сфере развлечений, игр, промышленного дизайна и архитектуры.

Производительность

TripoSR может создавать детализированные 3D-модели гораздо быстрее, чем другие методы. При тестировании на Nvidia A100 она генерирует 3D-выводы чернового качества (текстурированные mesh-модели) примерно за 0,5 секунды, превосходя другие открытые модели преобразования изображения в 3D, такие как OpenLRM. Помимо скорости, эта модель полностью доступна пользователям как с GPU, так и без них.

Спецификации

Подготовка обучающих данных включает в себя различные методы рендеринга данных, которые точно воспроизводят распределение изображений, встречающихся в реальном мире, значительно улучшая способность модели к обобщению. Для обучающих данных тщательно отбирается высококачественное подмножество набора данных Objaverse с лицензией CC-BY. Со стороны модели внедрены несколько технических усовершенствований по сравнению с базовой моделью LRM, включая оптимизацию количества каналов, масочное наблюдение и более эффективную стратегию рендеринга обрезки. Более подробную информацию можно найти в техническом отчете.

TripoSR приглашает разработчиков, дизайнеров и создателей изучить ее возможности, внести свой вклад в ее развитие и открыть ее потенциал для трансформации своей работы и отраслей.

Код модели TripoSR теперь доступен на GitHub Tripo AI, а веса модели доступны на Hugging Face. Пожалуйста, обратитесь к нашему техническому отчету для получения более подробной информации о модели TripoSR.