Mejor uso de la app de ARCore
Everies
Escanea los objetos que te rodean y transfórmalos en personajes únicos, interactivos y divertidos.
Qué hace
Con la app de everies, potenciada por la tecnología de Gemini, los objetos que te rodean cobran vida con personajes únicos, divertidos e interactivos: los "everies". Simplemente escanea los objetos que te rodean con la cámara y los ojos de Everies aparecerán en ellos.
Si presionas estos ojos, se genera un personaje con una personalidad, apariencia, diálogo y voz distintivos, todo adaptado al objeto, el entorno y el contexto específicos. También puedes presionar cualquier objeto y generar todos los caracteres, incluso si el ojo no aparece inicialmente.
Cada personaje puede mantener una conversación continua a través de tu entrada de voz, lo que mejora la interacción. También puedes guardar tus everies favoritos y tus escenas memorables.
La única capacidad de everies para convertir "todo" en personajes interactivos y divertidos es una característica destacada de la tecnología de LLM, que simplifica la experiencia y la hace más fácil de usar. La API de Gemini automatiza el proceso, con detección de objetos potenciada por TensorFlow Lite y generación de caracteres a través de archivos JSON. El posicionamiento de los ojos se determina a altas velocidades de fotogramas mediante la detección de objetos en el dispositivo combinada con la RA. ARCore ancla los ojos y los rostros de los personajes, mientras que la detección de alta velocidad de fotogramas y el LLM multimodal (Gemini) garantizan respuestas rápidas y una experiencia de alta calidad.
Actualmente, Everies se encuentra en versión beta como prueba de concepto y se espera que se lance de forma oficial con actualizaciones futuras, incluidas conversaciones continuas con tus Everies favoritos y funciones de grabación de video.
Con la tecnología de
- Android
- ARCore
- TensorFlow Lite
- Modelo de EfficientDet para la detección de objetos
Equipo
De
Reuniones del equipo
De
Japón