Everies
将周围物品转换为互动角色的 AR。
作用
使用 Gemini 技术赋能的 everies 应用,你就能以独一无二、俏皮的互动角色“永不磨灭”,让周围对象栩栩如生。只需用摄像头扫描周围的物体,Everie 的眼睛就会出现在物体上。
点按这些眼睛会生成一个具有鲜明个性、外表、对话和声音的角色,这些都是根据特定物体、环境和情境量身定制的。您还可以点按任何对象并生成每个字符,即使眼睛最初未显示也是如此。
每个角色都可以通过语音输入参与连续对话,从而加强互动。还可以保存喜爱的经典和难忘场景。
是 Versa 的独有功能,可让您全面开启将游戏转化为趣味有趣的角色,是 LLM 技术的一项突出功能,它可以简化游戏体验,使其更加人性化。该流程由 Gemini API 自动执行,具有由 TensorFlow Lite 提供支持的对象检测,以及通过 JSON 文件生成字符。系统会使用设备端对象检测与 AR 相结合,以高帧速率确定眼睛位置。ARCore 会将角色的眼睛和脸部固定,而高帧速率检测和多模态 LLM (Gemini) 可确保快速响应和优质体验。
Everies 目前处于 Beta 版概念验证阶段,旨在推出正式版本,未来将有更新,包括与喜爱的经典作品的持续对话以及视频录制功能。
可采用以下设备打造
- Android
- ARCore
- TensorFlow Lite
- 用于对象检测的 EfficientDet 模型
团队
更新者
埃里克斯队
发件人
日本