TwilightNav

Działanie

Aplikacja korzysta z interfejsu Gemini API, aby zwiększyć interakcję z użytkownikiem dzięki 2 kluczowym funkcjom:

Analiza i strukturyzacja treści: interfejs Gemini API analizuje format HTML strony internetowej, przekształcając ją w hierarchiczną strukturę drzewiastą. W tej strukturze każdy węzeł reprezentuje konkretny element treści, zawierający zarówno opis tego elementu, jak i podsumowanie jego elementów podrzędnych. Ta organizacja umożliwia efektywne przetwarzanie i interpretowanie treści na stronie internetowej.

Rozpoznawanie intencji i nawigacja: interfejs Gemini API odgrywa też kluczową rolę w interpretowaniu instrukcji użytkownika. Przetwarza dane wejściowe głosowe, aby wykryć intencję użytkownika i zidentyfikować odpowiedni węzeł docelowy w strukturze drzewa. Interfejs API dzieli polecenia użytkownika na 6 intencji: nawigowanie po witrynie, streszczenie, czytanie treści, wyszukiwanie informacji, klikanie elementów i wypełnianie formularzy.

Dzięki tym funkcjom aplikacja umożliwia użytkownikom wykonywanie różnych zadań w internecie za pomocą poleceń głosowych i gestyk, co sprawia, że przeglądanie jest bardziej dostępne i intuicyjne.