TwilightNav

O que faz?

O app usa a API Gemini para melhorar a interação do usuário com duas funções principais:

Análise e estruturação de conteúdo: a API Gemini analisa o formato HTML de uma página da Web, convertendo-o em uma estrutura de árvore hierárquica. Nessa estrutura, cada nó representa um elemento de conteúdo específico, contendo uma descrição dele e um resumo dos elementos filhos. Essa organização permite o processamento e o entendimento eficiente do conteúdo da página da Web.

Reconhecimento e navegação de intenção: a API Gemini também desempenha um papel crucial na compreensão das instruções do usuário. Ele processa a entrada de voz para detectar a intent do usuário e identifica o nó de destino correspondente na estrutura de árvore. A API categoriza os comandos do usuário em seis intents: navegação para um site, resumo, leitura de conteúdo, consulta de informações, clique em elementos e preenchimento de formulários.

Ao aproveitar esses recursos, o app permite que os usuários realizem várias tarefas baseadas na Web usando comandos de voz e gestos, tornando a experiência de navegação mais acessível e intuitiva.