Nemo Speak AAC
İnme geçiren hastaların tekrar konuşmasına yardımcı olan yapay zeka asistanı.
Ne işe yarar?
Nemo Speak AAC, inme veya nörodejeneratif hastalık nedeniyle iletişim yeteneğini kaybeden kişilerin mobil uygulamamızı kullanarak doğal dilde tekrar iletişim kurmasına olanak tanır.
Gemini, bir kişinin yaşamıyla ilgili bağlam bilgisi verildiğinde, sözlü bir soruya yanıt olarak o kişinin ne söyleyeceğini tahmin etme konusunda son derece başarılıdır. Gemini'yi, iletişim bozukluğu olan kişilerin gerçekten kullanabileceği çok basit bir arayüzde sunuyoruz. Bu sayede, kullanıcının oluşturabileceği yanıtların hızını, karmaşıklığını ve özgünlüğünü geleneksel AAC cihazlarına kıyasla önemli ölçüde artırıyoruz. Bu, AAC teknolojisinde büyük bir atılımdır ve önümüzdeki 6-12 ay içinde standart hale geleceğini düşünüyorum.
Sorulan bir soruya en alakalı yanıtları göstermek için şu anda Flutter için Gemini API SDK'sını kullanıyoruz. Ayrıca, uygulamamızla entegre etmeyi ve hafta içinde Google Cloud Platform'da dağıtmayı planladığımız bir Retrieval Augmented Generation hizmeti prototipimiz de var. Bu hizmet, afazi hastası kişinin yaşamıyla ilgili soruları yanıtlamak için VertexAI, LangChain, ChromaDB ve Gemini'yi kullanır. Elde ettiğimiz sonuçlardan çok memnunuz. Uygulama tarafından kullanılan mevcut RAG sisteminden çok daha verimli ve doğru çalışır.
Aşağıdakilerle tasarlandı:
- Flutter
- Firebase
Takım
Değişikliği yapan
Matthew Bonshor, Olivier Preston
Nereden
Kanada