TwilightNav
Görme engelli kullanıcıların internette gezinmesine yardımcı olun.
Ne işe yarar?
Uygulama, iki temel işlev aracılığıyla kullanıcı etkileşimini artırmak için Gemini API'yi kullanır:
İçerik Analizi ve Yapılandırma: Gemini API, bir web sayfasının HTML biçimini analiz ederek hiyerarşik bir ağaç yapısına dönüştürür. Bu yapıda her düğüm, hem ilgili öğenin açıklamasını hem de alt öğelerinin özetini içeren belirli bir içerik öğesini temsil eder. Bu düzenleme, web sayfası içeriğinin verimli bir şekilde işlenmesine ve anlaşılmasına olanak tanır.
Amaç Tanıma ve Gezinme: Gemini API, kullanıcı talimatlarını anlama konusunda da önemli bir rol oynar. Kullanıcının amacını algılamak için ses girişini işler ve ağaç yapısında ilgili hedef düğümü tanımlar. API, kullanıcı komutlarını altı intent'e ayırır: web sitesine gitme, özetleme, içerik okuma, bilgi sorgulaması, öğeleri tıklama ve form doldurma.
Bu özelliklerden yararlanan uygulama, kullanıcıların sesli komutlar ve hareketler aracılığıyla web tabanlı çeşitli görevleri gerçekleştirmesine olanak tanıyarak tarama deneyimini daha erişilebilir ve sezgisel hale getirir.
Aşağıdakilerle tasarlandı:
- Android
Takım
Değişikliği yapan
TwilightNav
Nereden
Avustralya