MAG

機能

MAG は、個人のデスクトップ コンパニオンです。話しかけたり、リマインダーを設定したり、健康管理をサポートしたり、おいしい料理の作り方を教えてくれたりします。健康状態や好みなどを記憶し、それに応じて動作を変更します。カメラで手持ちの食品を撮影し、栄養情報とレシピを表示します。
このアプリは、Raspberry PI のカスタム ROM で実行される Android アプリとして作成されています。他のハードウェアと組み合わせれば、頼れる相棒になります。パルスオキシメーターや心電図などの医療機器にアクセスできますが、Android アプリであるため、モバイル デバイスでも実行できます（ただし、機能は限定的です）。
音声はテキストに変換され、Gemini に送信されてレスポンスが取得されます。カメラから撮影した写真も Gemini に送信され、Gemini のマルチモデル機能により多面的なインテリジェントなインタラクションが可能になります。
Firebase は、会話の保存、検索、カレンダー、リマインダーなどに使用されます。Firebase ベクトル検索は、MAG のメモリを検索して適切に応答するために使用されます。