TwilightNav

Membantu individu yang mengalami gangguan penglihatan menjelajahi internet.

Fungsinya

Aplikasi ini menggunakan Gemini API untuk meningkatkan interaksi pengguna melalui dua fungsi utama:

Analisis dan Struktur Konten: Gemini API menganalisis format HTML halaman web, mengonversinya menjadi struktur hierarki hierarki. Dalam struktur ini, setiap node mewakili elemen konten tertentu, yang berisi deskripsi elemen tersebut dan ringkasan elemen turunannya. Pengelompokan ini memungkinkan pemrosesan dan pemahaman konten halaman web yang efisien.

Pengenalan dan Navigasi Intent: Gemini API juga berperan penting dalam memahami petunjuk pengguna. Model ini memproses input suara untuk mendeteksi intent pengguna dan mengidentifikasi node target yang sesuai dalam struktur hierarki. API ini mengategorikan perintah pengguna ke dalam enam intent: membuka situs, membuat ringkasan, membaca konten, membuat kueri informasi, mengklik elemen, dan mengisi formulir.

Dengan memanfaatkan kemampuan ini, aplikasi memungkinkan pengguna melakukan berbagai tugas berbasis web melalui perintah suara dan gestur, sehingga pengalaman menjelajah menjadi lebih mudah diakses dan intuitif.

Dibuat dengan

  • Android

Tim

Oleh

TwilightNav

From

Australia