Optima Ve

Como o Gemini 1.5 Pro oferece independência para pessoas com deficiência visual

O que faz?

Optima Ve: promovendo a independência de pessoas com deficiência visual
O Optima Ve é uma solução inovadora e eficaz que ajuda pessoas com deficiência visual a navegar pela vida cotidiana com mais independência. Utilizando o modelo de aprendizagem de linguagem multimodal (LLM, na sigla em inglês) Gemini 1.5 Pro do Google, o Optima Ve integra perfeitamente tecnologias visuais e de voz para oferecer uma experiência do usuário intuitiva.
Propósito e visão:
O Optima Ve tem como objetivo oferecer uma maneira simples e fácil de usar para que pessoas com deficiência visual realizem tarefas cotidianas usando smartphones, promovendo a independência e reduzindo os desafios da deficiência visual.
Funcionalidade principal:
Compreensão contextual: o LLM do Gemini 1.5 Pro compreende profundamente as consultas do usuário interpretando solicitações complexas e fazendo perguntas de esclarecimento. Isso garante um entendimento preciso antes da execução das tarefas.
Execução de tarefas: depois que o problema é entendido, a IA realiza tarefas como identificar objetos, ler textos ou navegar em espaços, resolvendo uma ampla gama de desafios diários.
Interação por voz: o Whisper, um mecanismo sofisticado de conversão de voz em texto, facilita a interação por voz natural e conversacional, permitindo uma comunicação sem esforço.
Capacidades de visão: o app usa a câmera do smartphone para processar entradas de vídeo, ajudando os usuários a localizar itens, identificar obstáculos e ler textos.

Desenvolvido com

  • Android
  • Web/Chrome
  • React Native
  • Whisper (link em inglês)

Equipe

Por

OptimaVe: como a independência é possível

De

Paquistão