Stability AI ускоряет генерацию 3D-изображений с помощью технологии Stable Fast 3D.

Совсем недавно создание 3D-изображений было сложной и трудоемкой задачей, требующей сложных каркасных моделей, специализированного программного обеспечения и мощного оборудования. Сегодня ситуация кардинально изменилась.

Stability AI представила революционную технологию генеративного ИИ под названием Stable Fast 3D, которая позволяет быстро создавать 3D-изображения из единственного снимка всего за полсекунды. Это значительное достижение в скорости обработки — на 1200 раз быстрее, чем предыдущие модели, такие как Stable Video 3D (SV3D), которые могли делать подобные выводы за 10 минут.

Stable Fast 3D открывает широкие возможности для применения в дизайне, архитектуре, розничной торговле, виртуальной реальности и разработке игр. Вы можете получить доступ к этой модели через чат-бота Stable Assistant от Stability AI и API Stability AI, а также по лицензии сообщества на Hugging Face.

Технология Stable Fast 3D

Stable Fast 3D развилась благодаря предыдущей работе Stability AI с моделью TripoSR. В марте компания сотрудничала с Trip AI для разработки технологии быстрой генерации 3D-активов.

В своем исследовательском документе ученые Stability AI описывают инновационные методы, использованные для быстрой реконструкции высококачественных 3D-сеток из одиночных изображений. Интегрируя несколько новых технологий, они решают распространенные проблемы быстрой 3D-реконструкции, улучшая как скорость, так и качество вывода.

В основе Stable Fast 3D лежит современная трансформерная сеть, которая генерирует высококачественные тройные представления — 3D-объемные модели — непосредственно из входного изображения. Эта сеть эффективно обрабатывает более крупные разрешения, не предъявляя высоких требований к вычислительным ресурсам, захватывая тонкие детали и минимизируя артефакты наложения.

Кроме того, модель предлагает уникальный подход к оценке материалов и освещения. С помощью новаторского вероятностного метода сеть оценки материалов предсказывает глобальные металлические и шероховатые значения, что улучшает качество и согласованность изображений. Замечательно, что Stable Fast 3D также интегрирует ключевые компоненты для создания комплексного 3D-изображения — сетку, текстуры и свойства материалов — в упрощенный, готовый к использованию актив.

Постоянные инновации от Stability AI

Stability AI широко известна благодаря своей технологии генерации изображений из текста Stable Diffusion. Хотя Stable Diffusion ориентирована на 2D-изображения, компания с ноября 2023 года активно развивает свои 3D-возможности, начиная с Stable 3D. Затем в марте была представлена Stable Video 3D, которая улучшила качество генерации 3D-изображений и добавила базовые функции панорамирования камеры для просмотра изображений.

Компания не останавливается на 3D; недавно они представили Stable Video 4D, который включает время в генерацию коротких 3D-видео, расширяя границы генеративного ИИ еще дальше.