Nemo Speak AAC
Asisten AI yang membantu penyintas stroke berbicara kembali.
Fungsinya
Nemo Speak AAC memungkinkan orang yang kehilangan kemampuan untuk berkomunikasi akibat stroke atau penyakit neurodegeneratif untuk berkomunikasi lagi dalam bahasa alami menggunakan aplikasi seluler kami.
Jika diberi konteks tentang kehidupan seseorang, Gemini sangat mahir memprediksi apa yang akan dikatakan orang tersebut sebagai respons terhadap pertanyaan lisan. Kami telah mengemas Gemini ke dalam antarmuka yang sangat sederhana yang dapat digunakan oleh orang dengan gangguan komunikasi - yang secara dramatis meningkatkan kecepatan, kompleksitas, dan kekhususan respons yang dapat dihasilkan seseorang dibandingkan dengan perangkat AAC tradisional. Ini adalah kemajuan besar dalam teknologi AAC dan saya yakin akan menjadi standar dalam 6-12 bulan ke depan.
Saat ini, kami menggunakan gemini api sdk untuk flutter guna menampilkan respons yang paling relevan terhadap pertanyaan yang diajukan. Kami juga memiliki prototipe layanan Retrieval Augmented Generation yang rencananya akan kami integrasikan dengan aplikasi dan di-deploy dalam seminggu di Google Cloud Platform. Layanan ini menggunakan VertexAI, LangChain, ChromaDB, dan Gemini untuk menjawab pertanyaan tentang kehidupan orang yang menderita afasia. Kami sangat puas dengan hasilnya. Sistem ini berperforma jauh lebih efisien dan akurat daripada sistem RAG saat ini yang digunakan oleh aplikasi.
Dibuat dengan
- Flutter
- Firebase
Tim
Oleh
Matthew Bonshor, Olivier Preston
From
Kanada