Gracias a varias IAs que trabajan al mismo tiempo, podremos transformar un video del mundo real en un mundo 3D de forma gratuita.
Richard Palethorpe, programador y usuario de diferentes IAs, creó una herramienta donde podremos poner un video y conseguir una maqueta 3D de lo que estamos viendo. Al utilizar y combinar diferentes Inteligencias Artificiales, podremos crear un mundo voxel 1 a 1 con el mundo real solo grabando un video y con algo de paciencia.
De un video del mundo real a un mundo 3D por IA
El proyecto combina Depth Anything 3 de ByteDance, depth-anything.cpp y técnicas SLAM para estimar la profundidad de cada fotograma del video, seguir el movimiento de la cámara y reconstruir una nube de puntos 3D navegable que funciona en una GPU hogareña, sin necesidad de pagar servidores costosos en la nube. Es completamente gratis y open-source, aunque los resultados actuales todavía son algo básicos y tienen un estilo voxel en lugar de ser totalmente realistas.
“El script depth-anything.cpp, combinado con la cámara de un teléfono y algunas técnicas SLAM, puede crear mundos voxelizados a partir de videos time-lapse. Ni siquiera estoy seguro de que la cámara de un teléfono sea compatible con la distribución, ya que gran parte de la información de profundidad tiene baja fiabilidad. Si exigiéramos fiabilidad, todos los objetos lejanos que aparecen debajo se filtrarían, pero aun así se pueden identificar edificios en el fondo”, comentó el creador de la herramienta.
En otro posteo en la red social X Richard explicó: “El uso de vóxeles densos resalta la deriva entre fotogramas en comparación con los puntos, lo que, en mi opinión, hace que DepthAnything3 sea aún más impresionante. Aquí se aplicaron métodos correctivos sobre DA3, pero sería recomendable hacerlo incluso con un lidar o una cámara de profundidad.”
La IA, en vez de avanzar a paso lento, está dando saltos enormes, ya que las grandes empresas están apostando por el futuro de la tecnología. Tal vez, en unos años, podremos tener equipos de videojuegos indies o estudios de películas de bajo presupuesto con calidades de grandes corporaciones. Si bien el mockup y los modelos 3D de escenarios son algo caros en este momento, tal vez en un futuro sea mucho más accesible para los usuarios corrientes.
Preguntas frecuentes sobre convertir un video en 3D con IA
¿Qué herramienta transforma un video en un escenario 3D con IA?
Es un proyecto open source del programador Richard Palethorpe, que combina Depth Anything 3 de ByteDance, la librería depth-anything.cpp y técnicas SLAM para reconstruir el espacio a partir de un video.
¿Es gratis crear escenarios 3D a partir de un video?
Sí. La herramienta es gratuita y de código abierto, y puede ejecutarse en una GPU hogareña, sin pagar servidores en la nube.
¿Los resultados 3D son realistas?
Por ahora no. Los mundos generados tienen un estilo voxel y todavía son básicos, aunque ya permiten reconocer edificios y estructuras del entorno original.
Si te sirvió esta nota, marcanos como fuente preferida y vas a ver más de Cultura Geek cuando busques en Google.Sumá 
como fuente preferida en 
