Компания ByteDance, владелец TikTok, представила революционный ИИ-инструмент Seed3D 1.0, способный создавать фотореалистичные 3D-модели на основе всего одного 2D-изображения. Система генерирует объекты с детальной геометрией, физически корректными материалами (PBR) и текстурами, учитывающими реальные свойства света.
Основанный на архитектуре мультимодального диффузионного трансформера (MMDiT), Seed3D 1.0 демонстрирует превосходство над конкурентами, включая более крупные модели. При использовании всего 1,5 млрд параметров инструмент превосходит по качеству даже Hunyuan3D 2.1 с 3 млрд параметров.
Ключевая особенность технологии - пошаговая стратегия генерации. Сначала система анализирует изображение с помощью визуально-языковой модели, извлекая параметры объектов и пространственную конфигурацию. Затем для каждого объекта отдельно синтезируются геометрия и материалы, после чего вся сцена собирается воедино. Этот подход позволяет создавать сцены любого масштаба - от интерьеров помещений до городских ландшафтов.
Сгенерированные модели можно напрямую импортировать в платформы моделирования, такие как Isaac Sim, для обучения искусственного интеллекта. Это открывает новые возможности для разработки автономных систем и роботов, которые могут обучаться в виртуальных средах, созданных на основе реальных изображений.
Технология обещает значительно ускорить и удешевить процесс создания 3D-контента для игр, виртуальной реальности и метавселенных, позволяя генерировать сложные объекты и сцены буквально за минуты вместо долгих часов ручной работы.
