Представляємо TripoSR від Tripo та Stability AI: високоякісні 3D-моделі менш ніж за секунду
GavinВступ
TripoSR, розроблена Tripo та Stability AI, — це передова open-source модель, призначена для швидкої 3D-реконструкції з одного зображення. Вона генерує високоякісні 3D-моделі менш ніж за секунду, що робить її придатною для різних застосувань у сфері розваг, ігор, промислового дизайну та архітектури.
Продуктивність
TripoSR може створювати деталізовані 3D-моделі значно швидше, ніж інші методи. Під час тестування на Nvidia A100 вона генерує 3D-результати чорнової якості (текстуровані сітки) приблизно за 0,5 секунди, перевершуючи інші відкриті моделі перетворення зображення на 3D, такі як OpenLRM. Окрім швидкості, ця модель повністю доступна користувачам як із GPU, так і без них.
Характеристики
Підготовка навчальних даних включає різноманітні техніки рендерингу даних, які точно відтворюють розподіл зображень, що трапляються в реальному світі, значно покращуючи здатність моделі до узагальнення. Для навчальних даних ретельно відібрано CC-BY, підмножину набору даних Objaverse вищої якості. З боку моделі представлено кілька технічних удосконалень порівняно з базовою LRM model, зокрема оптимізацію кількості каналів, нагляд за масками та ефективнішу стратегію рендерингу обрізання. Докладнішу інформацію можна прочитати в technical report.
TripoSR запрошує розробників, дизайнерів і творців дослідити її можливості, долучитися до її розвитку та відкрити її потенціал для трансформації своєї роботи й галузей.
Код моделі TripoSR тепер доступний на GitHub Tripo AI, а ваги моделі доступні на Hugging Face. Будь ласка, зверніться до нашого technical report, щоб отримати більше деталей про модель TripoSR.
