Everies

AR che trasforma gli oggetti circostanti in personaggi interattivi.

Descrizione

Con l'app everies, basata sulla tecnologia Gemini, gli oggetti circostanti prendono vita con personaggi unici, giocosi e interattivi. Basta scansionare gli oggetti circostanti con la fotocamera e gli occhi di tutti appariranno sugli oggetti.
Toccare questi occhi genera un personaggio con personalità, aspetto, dialoghi e voce distinti, il tutto su misura per l'oggetto, l'ambiente e il contesto specifici. Puoi anche toccare qualsiasi oggetto e generare un carattere everies, anche se inizialmente l'occhio non appare.
Ogni personaggio può partecipare a una conversazione continua tramite il tuo input vocale, migliorando l'interazione. Puoi anche salvare i tuoi everie preferiti e scene memorabili.

ogni volta che ha la possibilità di attivare tutto ciò che vuoi in personaggi interattivi e giocosi è una caratteristica eccezionale della tecnologia LLM, che semplifica l'esperienza e la rende più facile da usare. Il processo è automatizzato dall'API Gemini, con il rilevamento degli oggetti basato su TensorFlow Lite e la generazione dei caratteri tramite file JSON. Il posizionamento degli occhi è determinato a frequenze fotogrammi elevate utilizzando il rilevamento degli oggetti sul dispositivo in combinazione con l'AR. ARCore ancora i personaggi occhi e volti, mentre il rilevamento della frequenza fotogrammi elevata e l'LLM multimodale (Gemini) garantiscono risposte rapide e un'esperienza di alta qualità.

Attualmente in versione beta come proof of concept, everies mira a una release formale con aggiornamenti futuri, tra cui conversazioni continue con le funzionalità everies preferite e di registrazione video.

Realizzato con

  • Android
  • ARCore
  • TensorFlow Lite
  • Modello EfficientDet per il rilevamento di oggetti

Team

Di

everes del team

Da

Giappone