Нейросеть NeRF способна создать 3D-модели по фотографиям

Фирма Nvidia презентовала новую версию инструмента из области ИИ Neural Radiance Field (NeRF). Технология имеет адаптацию для взаимодействия с новейшими видеокартами с тензорными ядрами, на которых возможно создать 3D-сцены на основе двумерных фотографий за несколько миллисекунд. Предыдущей версии NeRF нужно было несколько часов, чтобы достичь подобного результата.

Принцип действия программы остался таким же: система проходит экспресс-обучение на нескольких фото объекта с разных ракурсов, а потом объединяет данные и дополняет пробелы. В результате выходит максимально реалистичная 3D-модель, которую можно использовать в самых разных направлениях.  В новой NeRF используется технология кодирования хэш-сетки с несколькими разрешениями, что позволяет оптимизировать работу на графических чипах.

Как сообщают в Nvidia, скорость – это главное преимущество новой нейросети, потому что они планируют использовать технологию в системах автономного вождения. Автопилоту станет легче рассчитать расстояние до помехи, если он увидит ее в трехмерном виде. Роботам в свою очередь будет проще ориентироваться в реальном мире. Кроме того, искусственному интеллекту NeRF скорее всего найдется применение в сфере развлечений, в образовании и архитектуре.