SmartAvatar

作用

我们的应用可将直播转变为互动体验，观看者可以通过 YouTube 聊天功能提问，并从 AI 驱动的爱因斯坦分身获得实时解答。该应用利用 Gemini API 处理观众问题并生成回答。收到问题后，系统会将其发送到 Gemini API 以获取回答，同时通过文本转语音服务将其转换为音频。然后，此音频会与 Unity3D 中支持口型同步的爱因斯坦化身像同步，营造出爱因斯坦直接与观看者对话的错觉。整个过程都会在 YouTube 上直播，这样观看者就可以在 Einstein 回答问题时看到自己的问题、姓名和照片显示在屏幕上。为了确保顺利运行，系统会将问题加入队列并按顺序处理，同时有序地管理问题和回答。集成 Gemini API 是提供准确、及时的回答的关键，可为用户打造动态且富有吸引力的体验。