Что он делает

Nemo Speak AAC позволяет людям, утратившим способность общаться из-за инсульта или нейродегенеративного заболевания, снова общаться на естественном языке с помощью нашего мобильного приложения.
Когда дается контекст о жизни человека, Gemini исключительно хорошо предсказывает, что этот человек скажет в ответ на устный вопрос. Мы упаковали Gemini в очень простой интерфейс, который люди с расстройствами коммуникации могут использовать на самом деле - значительно улучшив скорость, сложность и специфичность ответов, которые человек может генерировать по сравнению с традиционными устройствами AAC. Это огромный скачок вперед в технологии AAC, и я верю, что он станет стандартом в течение следующих 6-12 месяцев.
В настоящее время мы используем gemini api sdk для flutter, чтобы выводить наиболее релевантные ответы на заданный вопрос. У нас также есть прототип службы Retrieval Augmented Generation, которую мы планируем интегрировать с нашим приложением и развернуть в течение недели на Google Cloud Platform. Эта служба использует VertexAI, LangChain, ChromaDB и Gemini для ответов на вопросы о жизни людей с афазией. Мы очень довольны нашими результатами. Она работает гораздо эффективнее и точнее, чем текущая система RAG, используемая приложением.

Что он делает

Nemo Speak AAC позволяет людям, утратившим способность общаться из-за инсульта или нейродегенеративного заболевания, снова общаться на естественном языке с помощью нашего мобильного приложения.
Когда дается контекст о жизни человека, Gemini исключительно хорошо предсказывает, что этот человек скажет в ответ на устный вопрос. Мы упаковали Gemini в очень простой интерфейс, который люди с расстройствами коммуникации могут использовать на самом деле - значительно улучшив скорость, сложность и специфичность ответов, которые человек может генерировать по сравнению с традиционными устройствами AAC. Это огромный скачок вперед в технологии AAC, и я верю, что он станет стандартом в течение следующих 6-12 месяцев.
В настоящее время мы используем gemini api sdk для flutter, чтобы выводить наиболее релевантные ответы на заданный вопрос. У нас также есть прототип службы Retrieval Augmented Generation, которую мы планируем интегрировать с нашим приложением и развернуть в течение недели на Google Cloud Platform. Эта служба использует VertexAI, LangChain, ChromaDB и Gemini для ответов на вопросы о жизни людей с афазией. Мы очень довольны нашими результатами. Она работает гораздо эффективнее и точнее, чем текущая система RAG, используемая приложением.