TwilightNav
ช่วยให้ผู้ที่มีความบกพร่องทางสายตาไปยังส่วนต่างๆ ของอินเทอร์เน็ตได้
การทำงาน
แอปใช้ Gemini API เพื่อปรับปรุงการโต้ตอบของผู้ใช้ผ่านฟังก์ชันหลัก 2 รายการ ได้แก่
การวิเคราะห์และการจัดโครงสร้างเนื้อหา: Gemini API จะวิเคราะห์รูปแบบ HTML ของหน้าเว็บและแปลงเป็นโครงสร้างต้นไม้ตามลําดับชั้น ในโครงสร้างนี้ แต่ละโหนดแสดงถึงองค์ประกอบเนื้อหาที่เฉพาะเจาะจง ซึ่งมีทั้งคำอธิบายขององค์ประกอบนั้นและสรุปขององค์ประกอบย่อย การจัดระเบียบนี้ช่วยให้ประมวลผลและทำความเข้าใจเนื้อหาหน้าเว็บได้อย่างมีประสิทธิภาพ
การจดจำความตั้งใจและการไปยังส่วนต่างๆ: Gemini API ยังมีบทบาทสําคัญในการทำความเข้าใจคําสั่งของผู้ใช้ด้วย โดยระบบจะประมวลผลอินพุตเสียงเพื่อตรวจหาความตั้งใจของผู้ใช้และระบุโหนดเป้าหมายที่เกี่ยวข้องภายในโครงสร้างต้นไม้ API จะจัดหมวดหมู่คำสั่งของผู้ใช้ออกเป็น 6 ประเภท ได้แก่ การไปยังเว็บไซต์ การสรุป การอ่านเนื้อหา การค้นหาข้อมูล การคลิกองค์ประกอบ และการกรอกแบบฟอร์ม
การใช้ประโยชน์จากความสามารถเหล่านี้ช่วยให้แอปช่วยให้ผู้ใช้ทำงานต่างๆ บนเว็บได้ผ่านคำสั่งเสียงและท่าทางสัมผัส ซึ่งทำให้การท่องเว็บเข้าถึงได้ง่ายขึ้นและใช้งานง่ายขึ้น
สร้างขึ้นด้วย
- Android
ทีม
โดย
TwilightNav
จาก
ออสเตรเลีย