هبة

تقنية الواقع المعزّز التي تحوّل العناصر المحيطة إلى أحرف تفاعلية.

وظيفتها

باستخدام تطبيق everies المستند إلى تكنولوجيا Gemini، يمكنك إضفاء الحيوية على الأشياء المحيطة بك من خلال شخصيات فريدة ومرحة وتفاعلية تُعرف باسم "everies". ما عليك سوى مسح الأجسام المحيطة بك ضوئيًا باستخدام الكاميرا، وستظهر عيون Everies على الأجسام.
عند النقر على هذه العيون، يتم إنشاء شخصية لها شخصية ومظهر وحوار وصوت فريدان، وكل ذلك مخصّص للكائن والبيئة والسياق المحدّدَين. يمكنك أيضًا النقر على أي كائن وإنشاء شخصية مطلقًا، حتى إذا لم تظهر العين في البداية.
يمكن لكل شخصية المشاركة في محادثة مستمرة من خلال الإدخال الصوتي، ما يحسّن التفاعل. يمكنك أيضًا حفظ شخصياتك المفضّلة والمَشاهد التي لا تُنسى.

قدرة شاملة على تحقيق كل شيء إلى شخصيات تفاعلية ومرحة هي ميزة بارزة ضمن تكنولوجيا النماذج اللغوية الكبيرة (LLM) التي تبسّط التجربة وتجعلها أكثر سهولة في الاستخدام. تتمّ التشغيل الآلي للعملية من خلال Gemini API، مع ميزة "اكتشاف الأجسام" المستندة إلى TensorFlow Lite وإنشاء الأحرف من خلال ملفات JSON. يتم تحديد موضع العين عند استخدام عدد لقطات مرتفع في الثانية، وذلك من خلال ميزة "رصد الكائنات" على الجهاز فقط وميزة "الواقع المعزّز". تُثبِّت تقنية ARCore عيون الشخصيات ووجوهها، في حين تضمن ميزة رصد اللقطات بمعدّل عالٍ ونموذج اللغة الضخم المتعدّد الوسائط (Gemini) تقديم ردود سريعة وتجربة عالية الجودة.

كدليل على جدوى الفكرة، يسعى Everies حاليًا إلى إصدار إصدار رسمي يتضمّن تحديثات مستقبلية، بما في ذلك إجراء محادثات مستمرة مع الشخصيات المفضّلة لديهم وميزات تسجيل الفيديو.

تم الإنشاء باستخدام

  • Android
  • ARCore
  • TensorFlow Lite
  • نموذج EfficientDet لرصد العناصر

الفريق

من

فريق everies

من

اليابان