Sport Sage

機能

Sport Sage は、Gemini の機能を活用して、短いスポーツ動画を処理します。ユーザーに簡単なコンテキストを尋ねて、運動能力を高めるための有用な回答を作成します。このアプリは、専門家以外のユーザーを対象としており、ポケットに入れて持ち歩ける「ラバーダック」のようなサポートとして機能することを目的としています。迅速なオンボーディングと最小限のフィードバックを優先しました。AI や LLM は依然として多くのユーザーにとってハードルが高いため、複雑さをできるだけわかりやすいインターフェースに隠すようにしました。Gemini に求める内容を絞り込むと、フィードバックのコンテキストを把握し、ほぼ瞬時に有用なフィードバックを得ることができます。

動画が鮮明で被写体が 1 つの場合、動画の処理と理解はかなり良好です。チームスポーツは少し難しく、フィードバックが具体的でない場合がありますが、それでも有用です。

API をテストした結果、1 ショット リクエストと少数ショット リクエストのデフォルト出力は非常に優れていることがわかりました。チームは追加のトレーニング データをテストしていますが、作成したプロトタイプでは必要ないように思われます。キュレートされたモデル インテリジェンスの追加とフィードバック セッションのストリーミングが、次の主なステップです。

技術的には、Elixir と Phoenix（LiveView を使用）を使用してウェブ アプリケーションを開発しました。