SmartAvatar

Descrizione

La nostra app trasforma i live streaming in un'esperienza interattiva in cui gli spettatori possono porre domande tramite la chat di YouTube e ricevere risposte in tempo reale da un avatar di Einstein basato sull'IA. L'app sfrutta l'API Gemini per elaborare e generare risposte alle domande del pubblico. Quando viene ricevuta una domanda, viene inviata all'API Gemini per una risposta e contemporaneamente viene convertita in audio tramite un servizio di sintesi vocale. Questo audio viene poi sincronizzato con un avatar di Einstein con sincronizzazione labiale in Unity3D, creando l'illusione che Einstein stia parlando direttamente agli spettatori. L'intero processo viene trasmesso in live streaming su YouTube, consentendo agli spettatori di vedere la loro domanda, il loro nome e la loro foto sullo schermo mentre Einstein risponde. Per garantire un funzionamento regolare, le domande vengono messe in coda ed elaborate in sequenza, con domande e risposte gestite in modo ordinato. L'integrazione dell'API Gemini è fondamentale per fornire risposte accurate e tempestive, rendendo l'esperienza dinamica e coinvolgente per gli utenti.