Nvidia представила Instant NeRF – алгоритм сверхбыстрой реконструкции трехмерных сцен по нескольким изображениям. Instant NeRF нацелен на использование в системах автономного вождения и при создании метавлесенных.
Алгоритм был продемонстрирован на Nvidia GTC – ежегодной конференции компании по технологиям графических процессоров. Его основой является нейросеть Neural Radiance Field, разработанная в 2020-м году. Особенностью Instant NeRF является скорость работы: обучение модели занимает несколько секунд, что в тысячи раз предыдущих state-of-the-art нейросетей.
Одним из примеров применения алгоритма, который Nvidia продемонстрировала на GTC, является трансформация видео, записываемых беспилотным автомобилем, в трехмерные сцены улиц. Полученные воспроизводимые реконструкции можно использовать для увеличения безопасности беспилотных автомобилей.
Также с использованием Instant NeFR Nvidia планирует упростить создание интерактивных копий реальных пространств в метавселенных.