Everies

การทำงาน

แอป Everies ซึ่งขับเคลื่อนโดยเทคโนโลยี Gemini จะทำให้วัตถุรอบๆ ของคุณมีชีวิตชีวาด้วยตัวละครแบบอินเทอร์แอกทีฟที่ไม่เหมือนใคร ร่าเริง และเป็นแบบอินเทอร์แอ็กทีฟ เพียงแค่สแกนวัตถุรอบๆ ด้วยกล้องของคุณ แล้วสายตาของมนุษย์ก็จะปรากฏบนวัตถุนั้น
การแตะดวงตาเหล่านี้จะสร้างตัวละครที่มีบุคลิกลักษณะ รูปร่างหน้าตา บทสนทนา และเสียงที่โดดเด่น ซึ่งปรับให้เหมาะกับวัตถุ สภาพแวดล้อม และบริบทที่เฉพาะเจาะจง นอกจากนี้ คุณยังแตะวัตถุใดก็ได้และสร้างตัวละคร Everies ได้ แม้ว่าดวงตาจะไม่ปรากฏในตอนแรกก็ตาม
ตัวละครทุกตัวสามารถสนทนาอย่างต่อเนื่องผ่านอินพุตเสียงของคุณ ซึ่งจะช่วยเพิ่มการโต้ตอบ นอกจากนี้ คุณยังบันทึก Everies ที่ชอบและฉากที่น่าจดจำได้ด้วย

ความสามารถอันโดดเด่นของ Everies ในการเปลี่ยน "ทุกสิ่ง" ให้กลายเป็นตัวละครที่โต้ตอบและสนุกสนานคือฟีเจอร์ที่โดดเด่นของเทคโนโลยี LLM ซึ่งลดความซับซ้อนของประสบการณ์การใช้งานและทำให้ใช้งานง่ายขึ้น Gemini API จะดำเนินการขั้นตอนนี้โดยอัตโนมัติ โดยมีการตรวจจับวัตถุที่ทำงานด้วย TensorFlow Lite และการสร้างตัวละครผ่านไฟล์ JSON ระบบจะกำหนดตำแหน่งของตาด้วยอัตราเฟรมสูงโดยใช้การตรวจจับวัตถุในอุปกรณ์ร่วมกับ AR ARCore ตรึงตัวละคร ดวงตาและใบหน้า ในขณะที่การตรวจจับอัตราเฟรมสูงและ LLM (Gemini) แบบหลายโมดัลช่วยให้มั่นใจได้ว่าจะได้รับการตอบสนองที่รวดเร็วและประสบการณ์การใช้งานคุณภาพสูง

ปัจจุบัน Everies อยู่ในช่วงเบต้าเพื่อพิสูจน์แนวคิด โดยมุ่งสู่การเผยแพร่อย่างเป็นทางการพร้อมการอัปเดตในอนาคต ซึ่งรวมถึงการสนทนาอย่างต่อเนื่องกับ Everies ที่ชอบและฟีเจอร์การบันทึกวิดีโอ