NVIDIA anunció a finales de marzo una nueva tecnología llamada Campos de radiación neural,el NERF. Esto promete transformar una colección de imágenes fijas, claramente en dos dimensiones, en una escena digital 3D (tridimensional) en segundos. Todo fue posible solo mejorando y probando. inteligencia artificial que tiene disponible. Veamos en detalle cómo funciona y cuál es el efecto.
NVIDIA Research convierte fotos 2D en escenas 3D en un abrir y cerrar de ojos con inteligencia artificial. Aquí se muestra como en un video
Según la empresa, el resultado es un modelo de renderizado neuronal que aprende una escena 3D de alta resolución en segundos y puede renderizar las imágenes de esa escena en milisegundos, todo con Inteligencia Artificial (IA). Conocido como representación inversa, el proceso de ajuste de NVIDIA utiliza inteligencia artificial para aproximar el comportamiento de la luz en el mundo real, lo que permite a los desarrolladores reconstruir una escena 3D a partir de un puñado de imágenes 2D tomadas desde diferentes ángulos.
El equipo de investigación de NVIDIA ha desarrollado un enfoque que realiza esta tarea casi instantáneamente, lo que lo convierte en uno de los primeros modelos de este tipo en combinar el "entrenamiento" de redes neuronales ultrarrápido y representación rápido. En homenaje a los albores de las imágenes Polaroid, NVIDIA Research ha recreado una foto icónica de Andy Warhol quien tomó una instantánea, convirtiéndola en una escena 3D usando Instant NeRF.
Instant NeRF de NVIDIA se puede utilizar para crear avatares o escenas para el metaverso, ingresar a los participantes de la videoconferencia o reconstruir escenas para mapas digitales en 3D. david luebke, vicepresidente de investigación de NVIDIA Graphics, dice:
Mientras que las representaciones 3D tradicionales, como las mallas poligonales, son similares a las imágenes vectoriales, los NeRF son como imágenes de mapa de bits: capturan densamente cómo se irradia la luz desde un objeto o una escena.
Según NVIDIA, Instant NeRF es el la técnica NeRF más rápida desarrollada hasta la fecha. El modelo puede representar una escena 3D en unos diez milisegundos.
