Nemo Speak AAC

עוזר דיגיטלי מבוסס-AI שעוזר לאנשים ששרדו שבץ לדבר שוב.

תיאור

Nemo Speak AAC מאפשר לאנשים שאיבדו את היכולת לתקשר כתוצאה משבץ או ממחלה ניוונית ניוונית לדבר שוב בשפה טבעית באמצעות האפליקציה לנייד שלנו.
כשנותנים ל-Gemini הקשר לגבי החיים של אדם מסוים, הוא מצליח לחזות בצורה יוצאת דופן מה האדם הזה יגיד בתגובה לשאלה בעל פה. אספנו את Gemini בממשק פשוט מאוד שאנשים עם הפרעות תקשורת יכולים להשתמש בו בפועל – כך שאפשר ליצור תשובות מהר יותר, בצורה מורכבת יותר ובאופן ספציפי יותר בהשוואה למכשירי AAC רגילים. זהו צעד משמעותי קדימה בטכנולוגיית AAC, ולדעתי הוא יהפוך לסטנדרט ב-6 עד 12 החודשים הקרובים.
אנחנו משתמשים כרגע ב-Gemini API SDK ל-Flutter כדי להציג את התשובות הרלוונטיות ביותר לשאלה שנשאלה. יש לנו גם אב טיפוס של שירות 'יצירת נתונים משופרת לאחזור', שאנחנו מתכננים לשלב באפליקציה שלנו ולפרוס במהלך השבוע ב-Google Cloud Platform. השירות הזה משתמש ב-VertexAI, ב-LangChain, ב-ChromaDB וב-Gemini כדי לענות על שאלות לגבי החיים של אנשים עם אפזיה. אנחנו מרוצים מאוד מהתוצאות. היא יעילה ומדויקת הרבה יותר ממערכת RAG הנוכחית שבה האפליקציה משתמשת.

מבוסס על

  • Flutter
  • Firebase

קבוצה

על ידי

Matthew Bonshor, ‏ Olivier Preston

מאת

קנדה