Vismo

AI ベースの動画アシスタント

機能

Google のチームは、ユーザーが YouTube 動画の URL とカスタム プロンプトまたはクエリを入力できるスマート YouTube 動画アシスタント アプリケーション(Vismo)を開発しました。プロンプトの意図に基づいて、システムは Gemini API を活用してカスタマイズされた回答を提供します。このレスポンスは、プレーンテキスト、関連する画像を含むテキスト、指定した動画の動画スニペット、動画レスポンスなどの形式で返されます。

まず、動画の字幕とタイトルが抽出されます。Gemini API を使用して、テキスト レスポンスを生成したり、画像や動画のスニペットを分類したり、動画の要約のスクリプトを作成したりします。アプリは、文字起こしのタイムスタンプと字幕を使用して、関連する画像と動画セグメントを正確に特定して抽出します。また、ウェブソース、関連画像、YouTube 動画などのおすすめを表示することで、ユーザー エクスペリエンスを向上させます。Gemini API は、これらのウェブ検索結果とおすすめにつながる検索クエリの生成において重要な役割を果たします。

構成

  • ウェブ/Chrome
  • Google Custom Search JSON API
  • YouTube API

チーム

By

Maleek、Hamza、Bilal、Affan、Soban

差出人

パキスタン