Ultra3D: нейросеть для быстрой генерации высокодетализированных 3D-моделей

Исследователи из Китая представили Ultra3D — новую нейросеть, способную генерировать фотореалистичные 3D-модели по одному изображению. На выходе пользователь получает полноценную 3D-сцену с возможностью экспорта в различных форматах.

По словам разработчиков, существенный прогресс в области воксельных представлений позволил добиться высокой детализации и качества 3D-объектов. Однако многие текущие решения страдают от медленной работы и большой вычислительной нагрузки.

Ultra3D предлагает альтернативный подход. В её основе лежит компактное представление VecSet, которое создаёт предварительный черновой макет модели. Затем система Part Attention детализирует отдельные фрагменты, учитывая общую геометрию объекта. Такой двухэтапный подход позволил:

• Ускорить процесс генерации почти в 7 раз
• Повысить детализацию финальной модели
• Поддерживать разрешение до 1024 пикселей
• Добавлять текстуры

Попробовать Ultra3D можно на платформе Hitem3D. При регистрации пользователям предоставляется 100 токенов. Стоимость одной генерации — 10 токенов, с текстурами — 20 токенов.