MediaPipe Solutions は、アプリケーションで人工知能(AI)と機械学習(ML)の手法を迅速に適用するためのライブラリとツールのスイートを提供します。これらのソリューションは、アプリケーションにすぐに組み込み、ニーズに合わせてカスタマイズして、複数の開発プラットフォームで使用できます。MediaPipe Solutions は MediaPipe オープンソース プロジェクトの一部であるため、アプリケーションのニーズに合わせてソリューション コードをさらにカスタマイズできます。MediaPipe Solutions スイートには、次のものが含まれています。
これらのライブラリとリソースは、各 MediaPipe ソリューションのコア機能を提供します。
- MediaPipe Tasks: ソリューションをデプロイするためのクロス プラットフォーム API とライブラリ。詳細
- MediaPipe モデル: 各ソリューションで使用できる、事前トレーニング済みのすぐに実行可能なモデル。
これらのツールを使用すると、ソリューションをカスタマイズして評価できます。
- MediaPipe Model Maker: データを使用してソリューションのモデルをカスタマイズします。詳細
- MediaPipe Studio: ブラウザでソリューションを可視化、評価、ベンチマークします。詳細
利用可能なソリューション
MediaPipe Solutions は複数のプラットフォームで利用できます。各ソリューションには 1 つ以上のモデルが含まれており、一部のソリューションではモデルをカスタマイズすることもできます。次のリストに、サポートされている各プラットフォームで利用可能なソリューションと、Model Maker を使用してモデルをカスタマイズできるかどうかを示します。
| 解決策 | Android | Web | Python | iOS | モデルをカスタマイズする |
|---|---|---|---|---|---|
| LLM Inference API | |||||
| オブジェクト検出 | |||||
| 画像分類 | |||||
| 画像セグメンテーション | |||||
| インタラクティブなセグメンテーション | |||||
| 手のランドマーク検出 | |||||
| ジェスチャー認識 | |||||
| 画像エンベディング | |||||
| 顔検出 | |||||
| 顔のランドマーク検出 | |||||
| ポーズのランドマーク検出 | |||||
| 画像生成 | |||||
| テキスト分類 | |||||
| テキスト エンベディング | |||||
| 言語検出ツール | |||||
| 音声分類 |
始める
MediaPipe Solutions を始めるには、左側のナビゲーション ツリーに表示されているタスク(ビジョン、テキスト、音声など)を選択します。MediaPipe Tasks で使用する開発環境の設定についてサポートが必要な場合は、Android、ウェブアプリ、Python の設定ガイドをご覧ください。
従来のソリューション
2023 年 3 月 1 日をもって、以下の MediaPipe レガシー ソリューションのサポートを終了しました。他のすべての MediaPipe レガシー ソリューションは、新しい MediaPipe ソリューションにアップグレードされます。詳しくは、以下のリストをご覧ください。すべての MediaPipe Legacy Solutions のコード リポジトリとビルド済みバイナリは、引き続き現状のまま提供されます。
| 以前のソリューション | ステータス | 新しい MediaPipe ソリューション |
|---|---|---|
| 顔検出(詳細) | アップグレード済み | 顔検出 |
| Face Mesh(情報) | アップグレード済み | 顔のランドマーク検出 |
| Iris(情報) | アップグレード済み | 顔のランドマーク検出 |
| 手(情報) | アップグレード済み | 手のランドマーク検出 |
| ポーズ(情報) | アップグレード済み | ポーズのランドマーク検出 |
| 総合的(情報) | アップグレード | ホリスティック ランドマーク検出 |
| セルフィーのセグメンテーション(情報) | アップグレード済み | 画像セグメンテーション |
| 髪のセグメンテーション(詳細) | アップグレード済み | 画像セグメンテーション |
| オブジェクト検出(情報) | アップグレード済み | オブジェクト検出 |
| ボックスの追跡(詳細) | サポート終了 | |
| インスタント モーション トラッキング(詳細) | サポート終了 | |
| Objectron(情報) | サポート終了 | |
| KNIFT(情報) | サポート終了 | |
| AutoFlip(情報) | サポート終了 | |
| MediaSequence(info) | サポート終了 | |
| YouTube 8M(詳細) | サポート終了 |