回收顾问 3D

作用

回收顾问 3D 是一款 Web 应用，您可以上传照片，并从会说话的 3D 化身获得回收建议。该头像还会建议您前往接受照片中显示的物品类型的最近回收中心（如果适用）。负责废物管理的当地政府实体可以将该应用作为组件嵌入到其网站中，以宣传正确的处置方法并帮助当地居民。每个组件都可以本地化，以包含当地回收中心和当地准则的相关信息。您还可以更改 3D 角色、语言和/或语音。该应用通过让用户轻松、有趣且富有吸引力地进行回收，帮助保护环境。

该应用使用其 File API 将照片上传到 Gemini，并利用多轮函数调用进行多模态 Gemini API 调用。在第一轮对话中，Gemini 会对照片中的物品进行分类，并根据物品的类别询问更多详细信息。最终的文字回答流会发送到动画 3D 化身，后者可以使用 Google Cloud 语音合成 AI 语音实时说话和同步口型，并为听障人士或重听人士提供字幕。Gemini 不仅会生成头像要说的话语，还会使用关键字和表情符号控制其手势和面部表情。系统会根据 Gemini 回答和用户的位置信息计算最近的本地回收中心，并通过 Google 地图静态 API 生成的地图显示该中心。