La industria del a digitalización 3D / virtualización 3D ha crecido rápidamente. Hemos pasado de poder escanear cosas simples a virtualizar escenas amplias con gran realismo. Hoy quiero mostrarte todo el potencial que tiene LUMA AI, la tecnología Nerf mobile que te permitirá generar escenas 3D sin requerir de una potente computadora. Te explicaré todo el detalle.
¿Qué es Nerf?
Primero, no es la pistola de juego. Esta tecnología significa Neural Radiance Fields (inteligencia artificial) y son redes neuronales que tienen la capacidad de crear de manera automática una escena 3D partiendo de la lectura de imágenes 2D. Basicamente NERF utiliza imágenes que representan una escena real e interpolando entre sí para generar una escena 3D. Quédate con la idea de escena = digitalización de objetos 3D y quédate con la idea de representación = buscará a obtener realismo, es decir, tratará de captar información de elementos brillosos, que reflejen luz o sean transparentes.
Experimentar Nerf te hace pensar sobre el futuro de la digitalización. Considero que esta tecnología no va reemplazar o eliminar la fotogrametría o el escaneo 3D, sino que se va complementar o integrar en un futuro.
Crear NeRF puede tomar tiempo y sobre todo utilizar procesadores cada vez mas complejos, eso posiblemente sea su gran punto en contra hasta que apareció una solución: el NeRF mobile de Luma AI.
Luma AI – NeRF mobile ¿Qué es y cuáles son sus características?
Luma cumple el principio básico de NERF y nos permite generar diferentes tipos de procesos para lograr un resultado potente. Esto abre las posibilidades a nuevas oportunidades de creación y sobretodo a la digitalización del mundo.
Para acceder a la app iOS de Luma AI, se accede bajo una invitación, pues está en fase beta. Esperemos que pronto esté en beta pública para que más personas puedan experimentar esta tecnologíua.
Pimeros pasos Luma AI Nerf Mobile
- Al abrir la app nos aparece nuestros escaneos o en todo caso la galería.
- Presionamos el botón + y se nos abrirá la cámara.
- Existen dos modos iniciales de captura de escenarios: el Guiado (que te lo recomiendo bastante) y el Free style que te permite hacer cosas más creativas y amplias pero que no necesariamente obtendrás buen resultado, pues dependerá de ti mapear bien los espacios.
- La cruz nos sirve para trazar el espacio que queremos abarcar. Usaré una ceramica de un toro de Pucará.
- Nos aparecerá un box sirve indicar limites si es que fuera necesario. Confirmamos.
- Aparecerá una guía visual indicándonos cómo realizar la digitalización. Es realmente fácil hacer el recorrido y básicamente obliga a tener un buen resultado pues tenemos que mapear la parte del centro, abajo y arriba de la escena; y de manera muy precisa.
- Al terminar le ponemos un buen nombre y lo subimos.
- Al final los servidores de LUMA harán lo suyo.
- Esperamos unos 30 – 40 minutos tendremos este resultado.
Esta es nuestro resultado. Date cuenta que inclusive ha mapeado los vasos y se pueden entender las formas y dimensiones.
¿Pensabas que solo era un video de nuestro render? pues te equivocas, con Luma AI Nerf Mobile podemos extraer un objeto 3D. Aquí tendremos a nuestro toro de pucará bien detallado, y por supuesto hay diferentes formas de visualización de formas y texturas. Los archivos 3D se podrán exportar en formato GLTF y OBJ.
Hice una segunda prueba: Una lata que tiene un diseño genial y es brillante, por lo que puse a prueba esta tecnología. Realizamos lo mismos pasos (utilizamos las cruces para definir el escenario, seguimos la guía visual para capturar la escena y generamos el NeRF)
Luma AI Nerf versión Web
Vamos a trabajar con otra funcionalidad: el modo web. Este nos permitirá subir nuestros archivos para generar NeRF. El punto más relevante de este proceso es que podemos subir videos de recorridos, mapeo de sitios y objetos, y el proceso se realizará directamente desde la nube.
Para este ejemplo, Isabel se quedó quieta señalando el mar de Lima. Comenzamos grabar el video cubriendo todo el área. Lee todas la instrucciones que te indica Luma AI para que tengas un buen resultado. Subimos el archivo. Esperemos que se genere el producto.
Usar Luma te permite acelerar procesos de creación y por supuesto fusionar varias ideas y crear experiencias creativas. Acá tenemos otros experiementos NeRF fusionando un video que capté con mi lente de realidad aumentada de snapchat.
Aca tengo otro experimento que hice con Minecraft y NeRF.
