Przewodnik po rozwiązaniach MediaPipe

MediaPipe Solutions to zestaw bibliotek i narzędzi, które umożliwiają szybkie stosowanie w aplikacjach technik sztucznej inteligencji (AI) i uczenia maszynowego (ML). Możesz od razu wdrożyć te rozwiązania w swoich aplikacjach, dostosować je do swoich potrzeb i używać na wielu platformach deweloperskich. Rozwiązania MediaPipe są częścią projektu open source MediaPipe, dzięki czemu możesz dostosować kod rozwiązań do potrzeb swojej aplikacji. Zestaw rozwiązań MediaPipe obejmuje:

MediaPipe Solutions, Studio i Model Maker

Te biblioteki i zasoby zapewniają podstawowe funkcje każdego rozwiązania MediaPipe:

  • MediaPipe Tasks: wieloplatformowe interfejsy API i biblioteki do wdrażania rozwiązań. Więcej informacji
  • Modele MediaPipe: wytrenowane, gotowe do użycia modele do każdego rozwiązania.

Te narzędzia umożliwiają dostosowywanie i ocenianie rozwiązań:

  • MediaPipe Model Maker: dostosowywanie modeli do rozwiązań z użyciem Twoich danych. Więcej informacji
  • MediaPipe Studio: wizualizuj, oceniaj i porównuj rozwiązania w przeglądarce. Więcej informacji

Dostępne rozwiązania

Rozwiązania MediaPipe są dostępne na wielu platformach. Każde rozwiązanie zawiera co najmniej 1 model, a w przypadku niektórych rozwiązań możesz też dostosować modele. Poniższa lista zawiera informacje o tym, jakie rozwiązania są dostępne na poszczególnych obsługiwanych platformach i czy możesz użyć narzędzia Model Maker do dostosowania modelu:

Rozwiązanie Android Sieć Python iOS Dostosowywanie modelu
LLM Inference API wypełnione koło, wypełnione koło, wypełnione koło, wypełnione koło,
Wykrywanie obiektów wypełnione koło, wypełnione koło, wypełnione koło, wypełnione koło, wypełnione koło,
Klasyfikacja obrazów wypełnione koło, wypełnione koło, wypełnione koło, wypełnione koło, wypełnione koło,
Segmentacja obrazu wypełnione koło, wypełnione koło, wypełnione koło,
Interaktywna segmentacja wypełnione koło, wypełnione koło, wypełnione koło,
Wykrywanie punktów charakterystycznych dłoni wypełnione koło, wypełnione koło, wypełnione koło, wypełnione koło,
Rozpoznawanie gestów wypełnione koło, wypełnione koło, wypełnione koło, wypełnione koło, wypełnione koło,
Umieszczanie obrazów wypełnione koło, wypełnione koło, wypełnione koło,
Wykrywanie twarzy wypełnione koło, wypełnione koło, wypełnione koło, wypełnione koło,
Wykrywanie punktów charakterystycznych twarzy wypełnione koło, wypełnione koło, wypełnione koło,
Wykrywanie punktów orientacyjnych pozycji wypełnione koło, wypełnione koło, wypełnione koło,
Generowanie obrazów wypełnione koło, wypełnione koło,
Klasyfikacja tekstu wypełnione koło, wypełnione koło, wypełnione koło, wypełnione koło, wypełnione koło,
Wektor dystrybucyjny tekstu wypełnione koło, wypełnione koło, wypełnione koło,
Wykrywanie języka wypełnione koło, wypełnione koło, wypełnione koło,
Klasyfikacja dźwięku wypełnione koło, wypełnione koło, wypełnione koło,

Rozpocznij

Aby rozpocząć korzystanie z rozwiązań MediaPipe, wybierz dowolne zadanie z drzewa nawigacji po lewej stronie, w tym zadania związane z widzeniem, tekstemdźwiękiem. Jeśli potrzebujesz pomocy w konfigurowaniu środowiska programistycznego do używania z MediaPipe Tasks, zapoznaj się z przewodnikami konfiguracji dla Android, aplikacji internetowychPythona.

Starsze rozwiązania

1 marca 2023 r. zakończyliśmy obsługę starszych rozwiązań MediaPipe wymienionych poniżej. Wszystkie inne starsze rozwiązania MediaPipe zostaną uaktualnione do nowej wersji. Szczegółowe informacje znajdziesz na liście poniżej. Repozytorium kodu i gotowe pliki binarne wszystkich starszych rozwiązań MediaPipe będą nadal udostępniane w stanie, w jakim są.

Starsze rozwiązanie Stan Nowe rozwiązanie MediaPipe
Wykrywanie twarzy (informacje) Uaktualniono Wykrywanie twarzy
Siatka twarzy (informacje) Uaktualniono Wykrywanie punktów charakterystycznych twarzy
Iris (informacje) Uaktualniono Wykrywanie punktów charakterystycznych twarzy
Dłonie (informacje) Uaktualniono Wykrywanie punktów orientacyjnych dłoni
Pozycja (informacje) Uaktualniono Wykrywanie punktów orientacyjnych pozycji
Holistyczne (informacje) Przejdź na wyższą wersję Holistyczne wykrywanie punktów orientacyjnych
Segmentacja selfie (informacje) Uaktualniono Segmentacja obrazu
Segmentacja włosów (informacje) Uaktualniono Segmentacja obrazu
Wykrywanie obiektów (informacje) Uaktualniono Wykrywanie obiektów
Śledzenie pudełek (informacje) Koniec wsparcia
Błyskawiczne śledzenie ruchu (informacje) Koniec wsparcia
Objectron (informacje) Koniec wsparcia
KNIFT (informacje) Koniec wsparcia
Automatyczne odwrócenie (informacje) Koniec wsparcia
MediaSequence (info) Koniec wsparcia
YouTube 8M (info) Koniec wsparcia