TwilightNav

Descrizione

L'app utilizza l'API Gemini per migliorare l'interazione con l'utente tramite due funzioni chiave:

Analisi e strutturazione dei contenuti: l'API Gemini analizza il formato HTML di una pagina web, convertendola in una struttura ad albero gerarchica. In questa struttura, ogni nodo rappresenta un elemento di contenuto specifico, contenente sia una descrizione dell'elemento sia un riepilogo dei relativi elementi secondari. Questa organizzazione consente di elaborare e comprendere in modo efficiente i contenuti delle pagine web.

Riconoscimento dell'intento e navigazione: l'API Gemini svolge anche un ruolo fondamentale nella comprensione delle istruzioni dell'utente. Elabora l'input vocale per rilevare l'intenzione dell'utente e identifica il nodo target corrispondente all'interno della struttura ad albero. L'API classifica i comandi utente in sei intent: navigazione su un sito web, riepilogo, lettura di contenuti, query di informazioni, clic su elementi e compilazione di moduli.

Sfruttando queste funzionalità, l'app consente agli utenti di eseguire una serie di attività basate sul web tramite comandi vocali e gesti, rendendo l'esperienza di navigazione più accessibile e intuitiva.