Apple представила ИИ-модель, которая создаёт 3D-сцену из одной фотографии за секунду

Новая технология SHARP использует «функции Гаусса» для быстрого построения трёхмерного представления, но пока не дорисовывает скрытые части объектов.

Apple представила ИИ-модель, которая создаёт 3D-сцену из одной фотографии за секунду

Исследователи Apple представили модель искусственного интеллекта SHARP, способную создавать трёхмерное представление сцены всего по одной фотографии менее чем за секунду. Технология описана в статье «Чёткий монокулярный синтез изображения менее чем за секунду» и может найти применение в дополненной реальности, компьютерной графике и мобильных приложениях.

В отличие от традиционных методов, требующих десятков снимков с разных ракурсов, SHARP использует трёхмерные «функции Гаусса» — небольшие размытые пятна цвета и света, расположенные в пространстве. Модель анализирует единственное изображение, оценивает глубину сцены и предсказывает положение миллионов таких пятен, формируя объёмное представление, которое выглядит реалистично при небольшом смещении точки обзора.

Для обучения SHARP применялись как синтетические, так и реальные данные, что позволило ИИ изучить общие закономерности геометрии и перспективы. Однако у технологии есть важное ограничение: она точно воспроизводит только близкие к исходнику ракурсы и не дорисовывает части сцены, скрытые на оригинальной фотографии. Это компромисс, позволивший достичь высокой скорости работы — менее секунды на обработку.

Исходный код модели уже опубликован на GitHub. В демонстрациях SHARP успешно работала не только со статичными изображениями, но и с видео, создавая 3D-сцены на основе отдельных кадров.

Разработка открывает новые возможности для быстрого создания 3-мерного контента без специализированного оборудования, что особенно актуально для мобильных платформ и AR-приложений.

Читайте также

22-тонный КАМАЗ-1010 «обманывает» законы физики в карельских лесах

22-тонный КАМАЗ-1010 «обманывает» законы физики в карельских лесах

ChatGPT заблокировал запросы на имитацию стиля известных писателей

ChatGPT заблокировал запросы на имитацию стиля известных писателей

«Умный пластырь» определяет сахар в крови через пот за пять секунд

«Умный пластырь» определяет сахар в крови через пот за пять секунд

Российские специалисты научили роботов находить кратчайший путь в сто раз быстрее

Российские специалисты научили роботов находить кратчайший путь в сто раз быстрее

Физики создали необычный аналоговый ИИ из 400 вращающихся микрочастиц в капле жидкости

Физики создали необычный аналоговый ИИ из 400 вращающихся микрочастиц в капле жидкости

Нейросети научат искать потенциальные ямы: ДГТУ формирует датасеты для анализа дорог

Нейросети научат искать потенциальные ямы: ДГТУ формирует датасеты для анализа дорог

Российская Tomato Quality Station автоматически сортирует помидоры

Российская Tomato Quality Station автоматически сортирует помидоры

Ученые предупредили о новой угрозе для квантовых компьютеров

Ученые предупредили о новой угрозе для квантовых компьютеров

Рождение GEO: как бренды платят миллионы, чтобы их советовал ИИ

Рождение GEO: как бренды платят миллионы, чтобы их советовал ИИ

Робот МФТИ установил рекорд сборки головоломки «мегаминкс» за 9,6 секунды

Робот МФТИ установил рекорд сборки головоломки «мегаминкс» за 9,6 секунды

Бензин как лотерея: станут ли гибриды и электромобили популярным выбором россиян?

Бензин как лотерея: станут ли гибриды и электромобили популярным выбором россиян?

7 удивительных фактов о черных дырах, которые меняют наше представление о Вселенной

7 удивительных фактов о черных дырах, которые меняют наше представление о Вселенной

Ученые предложили новый способ искать разумную жизнь во Вселенной — без поиска технологий

Ученые предложили новый способ искать разумную жизнь во Вселенной — без поиска технологий

Владение смартфоном снижает навыки чтения у детей 3–6 классов – исследование UCLA

Владение смартфоном снижает навыки чтения у детей 3–6 классов – исследование UCLA

Следы возрастом 1,43 млн лет у озера Туркана рассказали о предках человека ростом 180 см

Следы возрастом 1,43 млн лет у озера Туркана рассказали о предках человека ростом 180 см

NASA показало поврежденное колесо марсохода Curiosity после почти 14 лет работы на Марсе

NASA показало поврежденное колесо марсохода Curiosity после почти 14 лет работы на Марсе