ARCore アプリのおすすめの使い方
Everies
周囲の物体をスキャンして、ユニークで遊び心のあるインタラクティブなキャラクターに変身させましょう。
機能
Gemini テクノロジーを搭載した everies アプリでは、周囲の物体にユニークで遊び心のあるインタラクティブなキャラクター「everies」が命を吹き込み、カメラで周囲の物体をスキャンするだけで、物体にエバーイーズの目が表示されます。
これらの目をタップすると、特定のオブジェクト、環境、コンテキストに合わせて、個性、外見、会話、声が異なるキャラクターが生成されます。最初に目が表示されなくても、任意のオブジェクトをタップして Everies の文字を生成することもできます。
すべてのキャラクターが音声入力を通じて継続的な会話に参加できるため、インタラクションが強化されます。気に入ったエバーリーや思い出のシーンは保存することもできます。
「すべて」をインタラクティブで遊び心のあるキャラクターに変えるエバーリーの唯一無二の能力は、LLM テクノロジーの際立った特徴であり、エクスペリエンスを簡素化し、よりユーザー フレンドリーにします。このプロセスは Gemini API によって自動化され、TensorFlow Lite によるオブジェクト検出と JSON ファイルによる文字生成が行われます。目の位置は、AR と組み合わせたデバイス上のオブジェクト検出を使用して、高フレームレートで決定されます。ARCore はキャラクターの目と顔を固定し、高フレームレート検出とマルチモーダル LLM(Gemini)により、迅速なレスポンスを実現し、高品質のエクスペリエンスを提供します。
現在、コンセプト プロトタイプとしてベータ版の everies は、お気に入りの everies との継続的な会話や動画録画機能などの今後のアップデートを予定して正式リリースを目指しています。
構成
- Android
- ARCore
- TensorFlow Lite
- オブジェクト検出用の EfficientDet モデル
チーム
By
チームの Everies
From
日本