SmartAvatar

O que faz?

Nosso app transforma as transmissões ao vivo em uma experiência interativa em que os espectadores podem fazer perguntas pelo chat do YouTube e receber respostas em tempo real de um avatar de Einstein com tecnologia de IA. O app usa a API Gemini para processar e gerar respostas às perguntas do público. Quando uma pergunta é recebida, ela é enviada à API Gemini para uma resposta e, ao mesmo tempo, é convertida em áudio por um serviço de texto para fala. Esse áudio é sincronizado com um avatar de Einstein com sincronização labial no Unity3D, criando a ilusão de que Einstein está falando diretamente com os espectadores. Todo o processo é transmitido ao vivo no YouTube, permitindo que os espectadores vejam a pergunta, o nome e a foto deles na tela enquanto Einstein responde. Para garantir a operação tranquila, as perguntas são enfileiradas e processadas sequencialmente, e as perguntas e respostas são gerenciadas de maneira ordenada. A integração da API Gemini é fundamental para fornecer respostas precisas e rápidas, tornando a experiência dinâmica e envolvente para os usuários.