Nemo Speak AAC

Un assistente AI che aiuta chi ha subito un ictus a parlare di nuovo.

Descrizione

Nemo Speak AAC consente alle persone che hanno perso la capacità di comunicare a causa di ictus o malattie neurodegenerative di comunicare di nuovo in linguaggio naturale utilizzando la nostra app mobile.
Quando viene fornito il contesto della vita di una persona, Gemini è eccezionalmente bravo a prevedere cosa direbbe la persona in risposta a una domanda pronunciata. Abbiamo confezionato Gemini in un'interfaccia molto semplice che le persone con disturbi della comunicazione possono effettivamente utilizzare, migliorando notevolmente la velocità, la complessità e la specificità delle risposte che una persona può generare rispetto ai dispositivi AAC tradizionali. Si tratta di un enorme passo avanti nella tecnologia AAC e credo che diventerà standard nei prossimi 6-12 mesi.
Al momento utilizziamo l'SDK dell'API Gemini per Flutter per mostrare le risposte più pertinenti a una domanda posta. Abbiamo anche un prototipo di un servizio di generazione di annunci basato su Retrieval Augmented che prevediamo di integrare con la nostra app ed eseguire il deployment entro la settimana sulla piattaforma Google Cloud. Questo servizio utilizza VertexAI, LangChain, ChromaDB e Gemini per rispondere alle domande sulla vita delle persone affette da afasia. Siamo molto soddisfatti dei risultati. Funziona in modo molto più efficiente e preciso rispetto all'attuale sistema RAG utilizzato dall'app.

Realizzato con

  • Flutter
  • Firebase

Team

Di

Matthew Bonshor, Olivier Preston

Da

Canada