MediaPipe 解決方案指南

MediaPipe Solutions 提供一系列程式庫和工具,可讓您在應用程式中快速套用人工智慧 (AI) 和機器學習 (ML) 技術。您可以立即將這些解決方案插入應用程式、根據需求自訂,並在多個開發平台中使用。MediaPipe Solutions 是 MediaPipe 開放原始碼計畫的一部分,因此您可以進一步自訂解決方案程式碼,以符合應用程式需求。MediaPipe Solutions 套件包含下列項目:

MediaPipe 解決方案、Studio 和 Model Maker

這些程式庫和資源提供各項 MediaPipe 解決方案的核心功能:

  • MediaPipe Tasks:用於部署解決方案的跨平台 API 和程式庫。瞭解詳情
  • MediaPipe 模型:經過預先訓練且立即可用的模型,適用於各項解決方案。

這些工具可協助您自訂及評估解決方案:

  • MediaPipe Model Maker:使用資料自訂解決方案模型。瞭解詳情
  • MediaPipe Studio:在瀏覽器中以視覺化方式呈現、評估及基準化解決方案。瞭解詳情

可用的解決方案

MediaPipe 解決方案適用於多個平台。每項解決方案都包含一或多個模型,您也可以自訂部分解決方案的模型。下表列出各支援平台可用的解決方案,以及是否能使用 Model Maker 自訂模型:

解決方案 Android 網頁版 Python iOS 自訂模型
LLM Inference API 實心圓 實心圓 實心圓 實心圓
物件偵測 實心圓 實心圓 實心圓 實心圓 實心圓
圖片分類 實心圓 實心圓 實心圓 實心圓 實心圓
圖片分割 實心圓 實心圓 實心圓
互動式區隔 實心圓 實心圓 實心圓
手部地標偵測 實心圓 實心圓 實心圓 實心圓
手勢辨識 實心圓 實心圓 實心圓 實心圓 實心圓
圖片嵌入 實心圓 實心圓 實心圓
臉部偵測 實心圓 實心圓 實心圓 實心圓
臉部特徵偵測 實心圓 實心圓 實心圓
姿勢地標偵測 實心圓 實心圓 實心圓
圖像生成 實心圓 實心圓
文字分類 實心圓 實心圓 實心圓 實心圓 實心圓
文字嵌入 實心圓 實心圓 實心圓
語言偵測器 實心圓 實心圓 實心圓
音訊分類 實心圓 實心圓 實心圓

開始使用

如要開始使用 MediaPipe Solutions,請選取左側導覽樹狀結構中列出的任何工作,包括視覺文字音訊工作。如需設定開發環境以搭配使用 MediaPipe Tasks 的相關協助,請參閱 Android網頁應用程式Python 的設定指南。

舊版解決方案

自 2023 年 3 月 1 日起,我們已停止支援下列 MediaPipe 舊版解決方案。所有其他 MediaPipe 舊版解決方案都會升級為新的 MediaPipe 解決方案。詳情請參閱下方清單。我們會繼續以現狀提供所有 MediaPipe 舊版解決方案的程式碼存放區和預先建構的二進位檔。

舊版解決方案 狀態 全新 MediaPipe 解決方案
臉部偵測 (資訊) 已升級 臉部偵測
臉部網格 (資訊) 已升級 臉部特徵偵測
Iris (資訊) 已升級 臉部特徵偵測
手部 (info) 已升級 手部地標偵測
姿勢 (info) 已升級 姿勢地標偵測
全方位 (資訊) 升級 全面偵測地標
自拍區隔 (資訊) 已升級 圖片區隔
頭髮分割 (資訊) 已升級 圖片區隔
物件偵測 (資訊) 已升級 物件偵測
追蹤出貨箱 (資訊) 支援已結束
即時動作追蹤 (資訊) 支援已結束
Objectron (資訊) 支援已結束
KNIFT (info) 支援已結束
自動翻轉 (資訊) 支援已結束
MediaSequence (info) 支援已結束
YouTube 8M (info) 支援已結束