SmartAvatar

Qué hace

Nuestra app transforma las transmisiones en vivo en una experiencia interactiva en la que los usuarios pueden hacer preguntas a través del chat de YouTube y recibir respuestas en tiempo real de un avatar de Einstein impulsado por IA. La app aprovecha la API de Gemini para procesar y generar respuestas a las preguntas del público. Cuando se recibe una pregunta, se envía a la API de Gemini para obtener una respuesta y, al mismo tiempo, se convierte en audio a través de un servicio de texto a voz. Luego, este audio se sincroniza con un avatar de Einstein habilitado para la sincronización de labios en Unity3D, lo que crea la ilusión de que Einstein les habla directamente a los usuarios. Todo el proceso se transmite en vivo en YouTube, lo que permite que los usuarios vean su pregunta, nombre y foto en la pantalla mientras Einstein responde. Para garantizar un funcionamiento fluido, las preguntas se ponen en cola y se procesan de forma secuencial, y las preguntas y las respuestas se administran de forma ordenada. La integración de la API de Gemini es clave para proporcionar respuestas precisas y oportunas, lo que hace que la experiencia sea dinámica y atractiva para los usuarios.