Nemo Speak AAC

O que faz?

O Nemo Speak AAC permite que pessoas que perderam a capacidade de se comunicar devido a um derrame ou doença neurodegenerativa voltem a se comunicar em linguagem natural usando nosso app para dispositivos móveis.
Quando recebe contexto sobre a vida de uma pessoa, o Gemini é excepcionalmente bom em prever o que essa pessoa diria em resposta a uma pergunta falada. O Gemini foi criado em uma interface muito simples que pode ser usada por pessoas com distúrbios de comunicação, melhorando drasticamente a velocidade, a complexidade e a especificidade das respostas que uma pessoa pode gerar em comparação com os dispositivos AAC tradicionais. Esse é um grande avanço na tecnologia AAC, e acredito que se torne o padrão nos próximos seis a 12 meses.
Atualmente, usamos o SDK da API Gemini para Flutter para mostrar as respostas mais relevantes a uma pergunta. Também temos um protótipo de um serviço de geração de recuperação aprimorada que pretendemos integrar ao nosso app e implantar no Google Cloud Platform ainda esta semana. Esse serviço usa a VertexAI, o LangChain, o ChromaDB e o Gemini para responder a perguntas sobre a vida de pessoas com afasia. Estamos muito satisfeitos com os resultados. Ele tem um desempenho muito mais eficiente e preciso do que o sistema atual de RAG usado pelo app.