Un nuevo modelo de renderizado neuronal desarrollado por NVIDIA puede transformar una colección de fotos 2D en escenas 3D en "un abrir y cerrar de ojos", según la compañía. La tecnología fue presentada durante la edición 2022 de la GPU Technology Conference (GTC), celebrada a fines de marzo.
Titulado Neural Radiance Field (NeRF), la técnica aprende una escena tridimensional en cuestión de segundos, pudiendo renderizar las imágenes en unos pocos milisegundos. El proceso incluye el uso de inteligencia artificial (IA) para aproximar el comportamiento de la luz en el mundo real, lo que le permite reconstruir la escena 3D utilizando fotografías bidimensionales.
La IA es capaz de predecir el color de la luz que se irradia desde cualquier dirección, en todos los puntos del espacio tridimensional, así como evitar bloqueos causados por obstrucciones como pilares. El fabricante de la tarjeta de video lanzó un video que muestra cómo ocurre la transformación casi al instante:
Idealmente, según NVIDIA, las imágenes utilizadas en el montaje 3D deberían tener poco o ningún movimiento, para evitar que la escena generada por la IA se desenfoque. Otro detalle importante es la necesidad de grabarlos desde varios ángulos diferentes.
acelerando las cosas
Los primeros modelos NeRF tardaron unos minutos en generar escenas nítidas y sin artefactos, aunque el entrenamiento llevó horas. Para acelerar el proceso, la compañía desarrolló una técnica llamada codificación de cuadrícula hash de resolución múltiple, optimizada para ejecutarse en GPU de marca.
A partir del cambio, fue posible aumentar la velocidad de renderizado en 1000 veces, en algunos casos, lo que llevó a la creación de Instant NeRF, la tecnología más rápida desarrollada hasta la fecha en este género.
Según NVIDIA, existen varias posibilidades para usar la técnica, como entrenar robots y automóviles autónomos, lo que facilita la comprensión del tamaño y la forma de los objetos al capturar imágenes de ellos. La arquitectura y el entretenimiento son otros segmentos que pueden aprovechar la novedad.
.jpg)
.jpg)