MediaPipe ソリューション ガイド

MediaPipe Solutions は、アプリケーションで人工知能(AI)と機械学習(ML)の手法を迅速に適用するためのライブラリとツールのスイートを提供します。これらのソリューションは、アプリケーションにすぐに組み込み、ニーズに合わせてカスタマイズして、複数の開発プラットフォームで使用できます。MediaPipe Solutions は MediaPipe オープンソース プロジェクトの一部であるため、アプリケーションのニーズに合わせてソリューション コードをさらにカスタマイズできます。MediaPipe Solutions スイートには、次のものが含まれています。

MediaPipe Solutions、Studio、Model Maker

これらのライブラリとリソースは、各 MediaPipe ソリューションのコア機能を提供します。

  • MediaPipe Tasks: ソリューションをデプロイするためのクロス プラットフォーム API とライブラリ。詳細
  • MediaPipe モデル: 各ソリューションで使用できる、事前トレーニング済みのすぐに実行可能なモデル。

これらのツールを使用すると、ソリューションをカスタマイズして評価できます。

  • MediaPipe Model Maker: データを使用してソリューションのモデルをカスタマイズします。詳細
  • MediaPipe Studio: ブラウザでソリューションを可視化、評価、ベンチマークします。詳細

利用可能なソリューション

MediaPipe Solutions は複数のプラットフォームで利用できます。各ソリューションには 1 つ以上のモデルが含まれており、一部のソリューションではモデルをカスタマイズすることもできます。次のリストに、サポートされている各プラットフォームで利用可能なソリューションと、Model Maker を使用してモデルをカスタマイズできるかどうかを示します。

解決策 Android Web Python iOS モデルをカスタマイズする
LLM Inference API 塗りつぶしの円 塗りつぶしの円 塗りつぶしの円 塗りつぶしの円
オブジェクト検出 塗りつぶしの円 塗りつぶしの円 塗りつぶしの円 塗りつぶしの円 塗りつぶしの円
画像分類 塗りつぶしの円 塗りつぶしの円 塗りつぶしの円 塗りつぶしの円 塗りつぶしの円
画像セグメンテーション 塗りつぶしの円 塗りつぶしの円 塗りつぶしの円
インタラクティブなセグメンテーション 塗りつぶしの円 塗りつぶしの円 塗りつぶしの円
手のランドマーク検出 塗りつぶしの円 塗りつぶしの円 塗りつぶしの円 塗りつぶしの円
ジェスチャー認識 塗りつぶしの円 塗りつぶしの円 塗りつぶしの円 塗りつぶしの円 塗りつぶしの円
画像エンベディング 塗りつぶしの円 塗りつぶしの円 塗りつぶしの円
顔検出 塗りつぶしの円 塗りつぶしの円 塗りつぶしの円 塗りつぶしの円
顔のランドマーク検出 塗りつぶしの円 塗りつぶしの円 塗りつぶしの円
ポーズのランドマーク検出 塗りつぶしの円 塗りつぶしの円 塗りつぶしの円
画像生成 塗りつぶしの円 塗りつぶしの円
テキスト分類 塗りつぶしの円 塗りつぶしの円 塗りつぶしの円 塗りつぶしの円 塗りつぶしの円
テキスト エンベディング 塗りつぶしの円 塗りつぶしの円 塗りつぶしの円
言語検出ツール 塗りつぶしの円 塗りつぶしの円 塗りつぶしの円
音声分類 塗りつぶしの円 塗りつぶしの円 塗りつぶしの円

始める

MediaPipe Solutions を始めるには、左側のナビゲーション ツリーに表示されているタスク(ビジョンテキスト音声など)を選択します。MediaPipe Tasks で使用する開発環境の設定についてサポートが必要な場合は、AndroidウェブアプリPython の設定ガイドをご覧ください。

従来のソリューション

2023 年 3 月 1 日をもって、以下の MediaPipe レガシー ソリューションのサポートを終了しました。他のすべての MediaPipe レガシー ソリューションは、新しい MediaPipe ソリューションにアップグレードされます。詳しくは、以下のリストをご覧ください。すべての MediaPipe Legacy Solutions のコード リポジトリとビルド済みバイナリは、引き続き現状のまま提供されます。

以前のソリューション ステータス 新しい MediaPipe ソリューション
顔検出(詳細 アップグレード済み 顔検出
Face Mesh(情報 アップグレード済み 顔のランドマーク検出
Iris(情報 アップグレード済み 顔のランドマーク検出
手(情報 アップグレード済み 手のランドマーク検出
ポーズ(情報 アップグレード済み ポーズのランドマーク検出
総合的(情報 アップグレード ホリスティック ランドマーク検出
セルフィーのセグメンテーション(情報 アップグレード済み 画像セグメンテーション
髪のセグメンテーション(詳細 アップグレード済み 画像セグメンテーション
オブジェクト検出(情報 アップグレード済み オブジェクト検出
ボックスの追跡(詳細 サポート終了
インスタント モーション トラッキング(詳細 サポート終了
Objectron(情報 サポート終了
KNIFT(情報 サポート終了
AutoFlip(情報 サポート終了
MediaSequence(info サポート終了
YouTube 8M(詳細 サポート終了