SmartAvatar

Description

Notre application transforme les diffusions en direct en expérience interactive, où les spectateurs peuvent poser des questions via le chat YouTube et recevoir des réponses en temps réel de la part d'un avatar d'Einstein basé sur l'IA. L'application utilise l'API Gemini pour traiter et générer des réponses aux questions de l'audience. Lorsqu'une question est reçue, elle est envoyée à l'API Gemini pour obtenir une réponse, tout en étant convertie en audio via un service de synthèse vocale. Ce contenu audio est ensuite synchronisé avec un avatar Einstein compatible avec la synchronisation labiale dans Unity3D, ce qui donne l'illusion qu'Einstein s'adresse directement aux spectateurs. L'ensemble du processus est diffusé en direct sur YouTube, ce qui permet aux spectateurs de voir leur question, leur nom et leur photo s'afficher à l'écran pendant qu'Einstein répond. Pour assurer un fonctionnement fluide, les questions sont mises en file d'attente et traitées de manière séquentielle, et les questions et les réponses sont gérées de manière ordonnée. L'intégration de l'API Gemini est essentielle pour fournir des réponses précises et rapides, ce qui rend l'expérience dynamique et attrayante pour les utilisateurs.