Guided Vision, la nueva función de Gemini Live, describe en tiempo real lo que tenemos frente a nosotros y hasta nos indica cómo mover la cámara cuando algo queda fuera de cuadro. Está pensada para personas ciegas o con baja visión, pero sirve para mucho más.
Google presentó el 1 de octubre Guided Vision, una función de Gemini Live que usa inteligencia artificial para describir en tiempo real lo que capta la cámara del celular. Está pensada para personas ciegas o con baja visión, aunque también sirve para leer la letra chica o identificar objetos.
Ya empezó a llegar a los celulares Android compatibles, pero el despliegue es gradual, así que puede que todavía no la tengas disponible.
Cómo funciona Guided Vision de Gemini y qué se puede hacer
Una de las principales ventajas es que admite preguntas de seguimiento. Si Gemini nos ayuda a encontrar algo, podemos pedirle que lea la fecha de vencimiento o que describa un detalle puntual.
Cuando el objeto que buscamos no aparece en el encuadre, la herramienta da indicaciones por voz para reencuadrar la cámara hasta dar con él. Además de estar dentro de Gemini Live, se puede usar desde TalkBack, el lector de pantalla de Android.
Guided Vision también nos deja compartir la cámara con Gemini y recibir descripciones por audio de lo que aparece en pantalla. Más allá de leer textos pequeños, identifica objetos, describe el entorno y responde sobre detalles específicos de lo que estamos mirando.
Para entrenarla, Google trabajó con Aira, un servicio de interpretación visual para personas ciegas y con baja visión: usó datos de más de 10.000 horas de interpretación y más de 1.000 personas de su red de testers la pusieron a prueba en tareas cotidianas.
¿Guided Vision sirve para moverse por la calle?
No. Google aclara que Guided Vision puede equivocarse, que no es un dispositivo médico y que no reemplaza al bastón blanco ni a otras ayudas de movilidad. Tampoco está pensada para navegar, guiar desplazamientos ni detectar obstáculos.
La propuesta sigue la línea de las funciones de reconocimiento visual de VoiceOver que Apple incorporó en sus dispositivos: en ambos casos, la IA busca facilitar el acceso a la información visual con descripciones y asistencia por voz, en especial para personas con discapacidad visual.
Es una herramienta complementaria para interpretar el entorno, que se suma a lo que los celulares ya aportan a las personas con discapacidad visual.
Preguntas frecuentes sobre Guided Vision
¿Cómo se activa Guided Vision en Android?
Hay tres caminos: desde la configuración del perfil en la app de Gemini; con los accesos directos de accesibilidad de Android (el botón flotante, deslizar con dos dedos o mantener las teclas de volumen); o desde el menú de TalkBack, que se abre tocando la pantalla con tres dedos.
¿Qué celular necesito para usar Guided Vision?
Un Android 9 o posterior, con la app de Gemini y el sistema actualizados a la última versión. Según Google, la función llega a las regiones e idiomas donde ya funciona Gemini Live.
¿Para qué otras cosas sirve Guided Vision?
Google menciona leer las perillas de un electrodoméstico o el menú de un restaurante, encontrar cosas perdidas o guardadas en un mueble, combinar ropa por colores y estampados, y entender cómo está distribuido un espacio que no conocemos.
Si te sirvió esta nota, marcanos como fuente preferida y vas a ver más de Cultura Geek cuando busques en Google.Sumá 
como fuente preferida en 
