如何最佳運用 ARCore 應用程式

Everies

掃描周遭物件,將其轉換為獨特、有趣的互動角色

用途

透過搭載 Gemini 技術的 everies 應用程式,你周遭的物品將會變得生動有趣,並出現互動角色「everies」。只要使用相機掃描周遭物體,Everipedia 的眼睛就會顯示在物體上。
輕觸這些眼睛,系統就會根據特定物件、環境和情境,產生具有獨特個性、外觀、對話和聲音的角色。您也可以輕觸任何物件並產生 Everies 角色,即使一開始沒有顯示眼睛也沒關係。
每個角色都能透過您的語音輸入進行持續對話,提升互動性。您也可以儲存喜愛的 Everi 和難忘的場景。

Everi 是 LLM 技術的獨特功能,可將「所有」內容轉換為互動式、生動有趣的角色,簡化使用體驗,讓使用者更容易上手。這個程序會由 Gemini API 自動執行,其中物件偵測功能由 TensorFlow Lite 提供,而字元產生功能則透過 JSON 檔案執行。系統會使用裝置端物件偵測功能搭配 AR,以高影格率判斷眼睛位置。ARCore 會將角色的眼睛和臉部做為錨點,而高影格率偵測和多模態 LLM (Gemini) 則可確保快速回應和高品質體驗。

Everies 目前處於 Beta 版概念驗證階段,我們希望在未來推出正式版,並提供更多更新內容,包括與最愛的 Everies 持續對話,以及錄製影片功能。

採用

  • Android
  • ARCore
  • TensorFlow Lite
  • 物件偵測的 EfficientDet 模型

團隊

變更者

團隊 everies

寄件者

日本