Компания Nvidia представила AI-технологию, которая на основе 2D-фотографий одной и той же сцены с разных углов способна мгновенно создать трехмерный цифровой рендеринг.
Nvidia доработала уже существующую технологию Neural Radiance Fields или NeRF от компаний Google, UC Berkeley и UC San Diego, которая способна из небольшого набора 2D-фотографий создать 3D-изображение. Нейронная сеть оценивает недостающую информацию о цвете и освещении, самостоятельно заполняет «пробелы» и воссоздает полное трехмерное изображение.
Для получения результата нейросети NeRF необходимо несколько фото и координаты положения камер. Однако процесс получения качественных 3D-объектов может занять часы.
Исследователи Nvidia смогли усовершенствовать нейросеть NeRF, повысив скорость ее работы на несколько порядков. Теперь создание 3D-объекта занимает несколько секунд.
Это стало возможным благодаря разработке нового метода кодирования хэш-сетки с несколькими разрешениями, который был оптимизирован для графических процессоров Nvidia. Он позволяет получать высококачественные результаты с использованием скоростной нейронной сети.
Компания предполагает, что технология может найти применение во многих сферах, таких как робототехника, беспилотный транспорт, создание виртуальной реальности, цифровое картографирование, архитектура, строительство, видеоигры и многое другое.
