everies

機能

Gemini テクノロジーを活用した Everies アプリでは、ユニークで遊び心のあるインタラクティブなキャラクターが「まるで」、周囲の物に命を吹き込みます。周りの物体をカメラでスキャンするだけで、周りの人の目が物体に映し出されます。
この目をタップすると、特定の物、環境、コンテキストに合わせて、独特の個性、外見、会話、声を持つキャラクターが生まれます。また、目が表示されていなくても、任意のオブジェクトをタップして、周遊キャラを生成することもできます。
すべてのキャラクターが音声入力を通じて継続的な会話に参加できるため、インタラクションが強化されます。お気に入りの日常のシーンや思い出に残るシーンを保存することもできます。

あらゆるものを変えられる唯一の機能インタラクティブで遊び心のあるキャラクターに変えることは、LLM テクノロジーの際立った機能であり、操作を簡素化し、よりユーザー フレンドリーなものにします。このプロセスは Gemini API によって自動化され、TensorFlow Lite によるオブジェクト検出と JSON ファイルによる文字生成が行われます。眼の位置は、デバイス上のオブジェクト検出と AR を組み合わせて、高フレームレートで決定されます。ARCore はキャラクターの目と顔を固定し、高フレームレート検出とマルチモーダル LLM（Gemini）により、迅速なレスポンスを実現し、高品質のエクスペリエンスを提供します。

現在ベータ版として提供中の Everies は、今後のアップデートで正式リリースを目指しています。これにはお気に入りの Everies との継続的な会話や録画機能が含まれます。