SmartVision

Qué hace

SmartVision es un asistente para dispositivos móviles para usuarios con discapacidad visual
que les brinda accesibilidad,
independencia y asistencia mejoradas para navegar por su vida diaria. Este asistente para dispositivos móviles aprovecha la tecnología para ofrecer una amplia variedad de funciones y funcionalidades adaptadas a las necesidades de las personas con discapacidad visual con el objetivo de que sus tareas diarias sean más fáciles de realizar y permitir una mayor participación en la sociedad.
Esta app para Android tiene funciones como Detectar objetos, Resumir documentos, Modo de lectura, Detectar rostros y Escanear productos. Las funciones Detecta objetos y Resume documentos se compilan con la API de Gemini.En particular, Detecta objetos usa el modelo Gemini-1.5-Flash, ya que es más rápido en comparación con Gemini-1.5-Pro. Para usar la función de detección de objetos, el usuario deberá usar una gorra inteligente que tenga un módulo de cámara habilitado para Wi-Fi. Las imágenes tomadas con esta cámara se mostrarán en la app para dispositivos móviles y se enviarán a la API de Gemini remota para que describa la imagen capturada en tiempo real por la API de Gemini. La descripción se leerá o anunciará al usuario con la función de texto a voz para la comodidad del usuario con discapacidad visual. Además, los documentos de resumen(solo PDF) se compilan con el modelo Gemini-1.5-pro. Para usar esta función, el usuario debe seleccionar un documento PDF que resida en la memoria del teléfono y establecer un texto de instrucción (por ejemplo, resumir el documento PDF en 150 palabras). La API de Gemini resumirá el contenido de texto presente en el PDF y se lo anunciará al usuario.