Navegação cega

O que faz?

Eu criei o app que ajuda pessoas com deficiência a navegar pelo ambiente. Ele tem três modos principais: "Modo de navegação", que orienta o usuário sobre o ambiente; "Modo assistente", que ajuda o usuário a perguntar sobre o ambiente; e "Modo de leitura", que ajuda o usuário a ler qualquer coisa, como livros ou placas.
A API Gemini AI foi usada em três arquivos do projeto, e cada arquivo é alocado para cada modo acima.
Assim, a câmera do smartphone do usuário captura os frames/imagens em tempo real e os envia para a caixa de entrada do Gemini, que os cria como saída, já que cada modelo é treinado. Em seguida, as solicitações de saída são exibidas na sobreposição, e com a ajuda de TTS (texto para fala), pessoas cegas podem ouvir a voz e navegar com facilidade.