everies

RA qui transforme les objets environnants en personnages interactifs.

Description

Avec l'appli Everies, optimisée par la technologie Gemini, les objets environnants prennent vie grâce à des personnages uniques, ludiques et interactifs. Il vous suffit de scanner les objets environnants avec votre appareil photo pour faire apparaître les yeux des vergers.
Appuyer sur ces yeux génère un personnage avec une personnalité, une apparence, un dialogue et une voix distincts, tous adaptés à l'objet, à l'environnement et au contexte spécifiques. Vous pouvez également appuyer sur n'importe quel objet et générer un personnage des Everies, même si l'œil n'apparaît pas initialement.
Grâce à la saisie vocale, chaque personnage peut participer à une conversation continue, ce qui améliore l'interaction. Vous pouvez également enregistrer vos vergers préférés et vos scènes mémorables.

La capacité unique de tous les employés à tout transformer en personnages interactifs et ludiques est une fonctionnalité remarquable de la technologie LLM qui simplifie l'expérience et la rend plus facile à utiliser. Le processus est automatisé par l'API Gemini, avec la détection d'objets optimisée par TensorFlow Lite et la génération de caractères via des fichiers JSON. Le positionnement des yeux est déterminé à des fréquences d'images élevées, en combinant la détection d'objets sur l'appareil et la RA. ARCore ancre les caractères des yeux et des visages, tandis que la détection à fréquence d'images élevée et le LLM multimodal (Gemini) garantissent des réponses rapides et une expérience de haute qualité.

Actuellement en version bêta à titre de preuve de concept, everies vise une version officielle avec de futures mises à jour, y compris des conversations continues avec les everies préférés et des fonctionnalités d'enregistrement vidéo.

Conçu avec

  • Android
  • ARCore
  • TensorFlow Lite
  • Modèle EffectiveDet pour la détection d'objets

Équipe

Par

Équipe des Everies

De

Japon