Google ha lanzado Guided Vision, una nueva función orientada a la accesibilidad e impulsada por inteligencia artificial dentro de Gemini Live. Su objetivo es ofrecer asistencia visual conversacional en tiempo real a personas ciegas, con baja visión o a cualquiera que necesite apoyo visual dinámico en su día a día.
Desarrollada en estrecha colaboración con la comunidad de accesibilidad y la plataforma especializada Aira, la función acumuló decenas de miles de horas de prueba e interpretación de datos. Más de 1.000 probadores evaluaron la herramienta en situaciones cotidianas para afinar la precisión del modelo y garantizar estándares de seguridad confiables.
¿Cómo funciona Guided Vision?
Al activar la cámara dentro de una sesión de Gemini Live, la IA actúa como un compañero de conversación interactivo. Si la cámara apunta demasiado alto, muy cerca o fuera de ángulo, Gemini ofrece instrucciones verbales de encuadre en tiempo real, como "gira lentamente a la derecha", "inclina hacia abajo" o "da un paso atrás" para lograr la toma idónea y responder con precisión a las preguntas del usuario.
Entre las aplicaciones cotidianas destacan:
-
Lectura de texto fino: decodificar etiquetas nutricionales, diales de electrodomésticos o menús en restaurantes con poca luz.
-
Localización de objetos: encontrar artículos caídos en el suelo o identificar un ingrediente específico en una alacena.
-
Descripción de detalles y combinaciones: identificar colores, patrones de ropa o prendas que combinen.
-
Exploración de espacios: obtener descripciones generales sobre la distribución de una habitación o el entorno inmediato.
-
Interacción multilingüe: soporte para conversaciones naturales en diversos idiomas.
Disponibilidad y activación
Guided Vision está disponible para dispositivos con Android 9 o superior en las regiones e idiomas donde Gemini Live está habilitado.
Para usarlo desde la app de Gemini:
-
Ve a la configuración de tu perfil en la app móvil de Gemini.
-
Activa la opción Usar Guided Vision en Live.
-
Inicia Gemini Live y toca el botón para compartir tu cámara.
Para mayor rapidez, puedes configurar un acceso directo en Ajustes de Android > Accesibilidad > Asistencia visual > Guided Vision. Esta configuración se activa mediante un botón flotante, deslizamiento con dos dedos o presionando ambas teclas de volumen. Además, cuenta con integración nativa en Google TalkBack a través de su menú desplegable de tres dedos.
Guided Vision representa un avance fundamental en la interacción entre la inteligencia artificial multimodal y la accesibilidad digital y sienta un antecedente clave de cómo la IA generativa puede integrarse de forma práctica para otorgar mayor autonomía en las tareas cotidianas.