NVIDIA превращает 2D-фотографии в 3D-сцены с помощью искусственного интеллекта | видео
NVIDIA объявила в конце марта появилась новая технология под названием Поля нейронного излученияили НеРФ. Это обещает преобразовать коллекцию неподвижных изображений, четко в двух измерениях, в цифровую трехмерную (трехмерную) сцену за считанные секунды. Все было возможно только путем улучшения и тестирования интеллект artificiale что у него есть в наличии. Давайте посмотрим подробно, как это работает и каков эффект.
NVIDIA Research мгновенно превращает 2D-фотографии в 3D-сцены с помощью искусственного интеллекта. Здесь показано как на видео
По словам компании, в результате получается нейронная модель рендеринга, которая изучает 3D-сцену высокого разрешения за секунды и может отображать изображения этой сцены за миллисекунды, и все это с помощью искусственного интеллекта (ИИ). Процесс настройки NVIDIA, известный как обратный рендеринг, использует искусственный интеллект для аппроксимировать поведение света в реальном мире, что позволяет разработчикам реконструировать 3D-сцену из нескольких 2D-изображений, снятых под разными углами.
Исследовательская группа NVIDIA разработала подход, который выполняет эту задачу почти мгновенно, что делает ее одной из первых моделей такого рода, сочетающих молниеносное «обучение» нейронной сети и оказание быстро. Отдавая дань уважения зарождению изображений Polaroid, NVIDIA Research воссоздала легендарную фотографию Энди Уорхол который сделал снимок, превратив его в 3D-сцену с помощью InstanT NeRF.
NVIDIA Instant NeRF можно использовать для создавать аватары или сцены для метавселенная, введите участников видеоконференции или реконструируйте сцены для цифровых 3D-карт. Дэвид Любке, вице-президент по исследованиям в NVIDIA Graphics, говорит:
В то время как традиционные 3D-представления, такие как полигональные сетки, похожи на векторные изображения, NeRF подобны растровым изображениям: они плотно отражают то, как свет исходит от объекта или сцены.
По словам NVIDIA, Instant NeRF — это самый быстрый метод NeRF, разработанный на сегодняшний день. Модель может визуализировать 3D-сцену примерно за десять миллисекунд.
