Wayfinder AI

การทำงาน

แอปนี้สร้างขึ้นเพื่อช่วยให้ผู้ที่มีความบกพร่องทางสายตาระบุสิ่งกีดขวางและเส้นทางสำหรับการนำทางได้ โดยจะใช้กล้องของโทรศัพท์เพื่อรับเฟรมวิดีโอและส่งไปยัง Gemini API เพื่อวิเคราะห์และส่งสิ่งที่ Gemini เห็นในรูปภาพกลับ เราใช้พรอมต์ที่อธิบายว่าต้องการเอาต์พุตแบบใด และ API จะระบุเส้นทาง สิ่งกีดขวาง และรายละเอียดสำคัญอื่นๆ ในบริเวณนั้น จากนั้นปลั๊กอิน Google Text to Speech จะใช้เพื่ออ่านออกเสียงข้อความที่ได้รับ