AAC de Nemo Speak

Qué hace

Nemo Speak AAC permite que las personas que perdieron la capacidad de comunicarse debido a un accidente cerebrovascular o una enfermedad neurodegenerativa vuelvan a hacerlo en lenguaje natural con nuestra app para dispositivos móviles.
Cuando se le proporciona contexto sobre la vida de una persona, Gemini es excepcionalmente bueno para predecir lo que esa persona diría en respuesta a una pregunta hablada. Empaquetamos Gemini en una interfaz muy simple que las personas con trastornos de la comunicación pueden usar, lo que mejora de forma significativa la velocidad, la complejidad y la especificidad de las respuestas que una persona puede generar en comparación con los dispositivos de AAC tradicionales. Este es un gran avance en la tecnología de AAC y creo que se convertirá en estándar en los próximos 6 a 12 meses.
Actualmente, usamos el SDK de la API de Gemini para Flutter para mostrar las respuestas más relevantes a una pregunta formulada. También tenemos un prototipo de un servicio de generación de recuperación con realidad aumentada que planeamos integrar a nuestra app y, luego, implementar en Google Cloud Platform en un plazo de una semana. Este servicio usa Vertex AI, LangChain, ChromaDB y Gemini para responder preguntas sobre la vida de las personas con afasia. Estamos muy contentos con los resultados. Tiene un rendimiento mucho más eficiente y preciso que el sistema de RAG actual que usa la app.