MediaPipe Solutions מספקת חבילה של ספריות וכלים שמאפשרים לכם להחיל במהירות טכניקות של בינה מלאכותית (AI) ולמידת מכונה (ML) באפליקציות שלכם. אתם יכולים לשלב את הפתרונות האלה באפליקציות שלכם באופן מיידי, להתאים אותם לצרכים שלכם ולהשתמש בהם בכמה פלטפורמות פיתוח. MediaPipe Solutions הוא חלק מפרויקט הקוד הפתוח של MediaPipe, כך שאתם יכולים להתאים אישית את קוד הפתרונות כדי לענות על הצרכים של האפליקציה שלכם. חבילת הפתרונות של MediaPipe כוללת את הפתרונות הבאים:
הספריות והמשאבים האלה מספקים את הפונקציונליות העיקרית לכל פתרון של MediaPipe:
- MediaPipe Tasks: ממשקי API וספריות חוצי פלטפורמות לפריסת פתרונות. מידע נוסף
- מודלים של MediaPipe: מודלים שעברו אימון מראש ומוכנים להפעלה, לשימוש בכל פתרון.
הכלים האלה מאפשרים לכם להתאים אישית פתרונות ולהעריך אותם:
- MediaPipe Model Maker: התאמה אישית של מודלים לפתרונות עם הנתונים שלכם. מידע נוסף
- MediaPipe Studio: פתרון להמחשה, להערכה ולהשוואה של פתרונות בדפדפן. מידע נוסף
פתרונות זמינים
פתרונות MediaPipe זמינים במספר פלטפורמות. כל פתרון כולל מודל אחד או יותר, ובחלק מהפתרונות אפשר גם להתאים אישית את המודלים. ברשימה הבאה מפורטים הפתרונות שזמינים לכל פלטפורמה נתמכת, ומוסבר אם אפשר להשתמש ב-Model Maker כדי להתאים אישית את המודל:
| פתרון | Android | פיתוח אתרים | Python | iOS | התאמה אישית של המודל |
|---|---|---|---|---|---|
| LLM Inference API |  |
|
|
|
|
| זיהוי אובייקטים | |
|
|
|
|
| סיווג תמונות | |
|
|
|
|
| חלוקת תמונות למקטעים | |
|
|
||
| פילוח אינטראקטיבי | |
|
|
||
| זיהוי נקודות ציון של היד | |
|
|
|
|
| זיהוי תנועות | |
|
|
|
|
| הטמעת תמונות | |
|
|
||
| זיהוי פנים | |
|
|
|
|
| זיהוי נקודות ציון בפנים | |
|
|
||
| זיהוי נקודות ציון של תנוחות | |
|
|
||
| יצירת תמונות | |
|
|||
| סיווג הטקסט | |
|
|
|
|
| הטמעת טקסט | |
|
|
||
| זיהוי שפה | |
|
|
||
| סיווג אודיו | |
|
|
שנתחיל?
כדי להתחיל להשתמש בפתרונות MediaPipe, בוחרים באחת מהמשימות שמופיעות בעץ הניווט בצד ימין, כולל משימות ראייה, טקסט ואודיו. אם אתם צריכים עזרה בהגדרת סביבת פיתוח לשימוש ב-MediaPipe Tasks, תוכלו לעיין במדריכי ההגדרה ל-Android, ל-web apps ול-Python.
פתרונות מדור קודם
החל מ-1 במרץ 2023, הפסקנו את התמיכה בפתרונות מדור קודם של MediaPipe שמפורטים בהמשך. כל שאר הפתרונות הקודמים של MediaPipe ישודרגו לפתרון חדש של MediaPipe. פרטים נוספים מופיעים ברשימה שבהמשך. מאגר הקוד והקבצים הבינאריים המוכנים מראש של כל הפתרונות הקודמים של MediaPipe ימשיכו להיות זמינים על בסיס 'כמו שהוא'.
| פתרון מדור קודם | סטטוס | פתרון חדש של MediaPipe |
|---|---|---|
| זיהוי פנים (מידע) | שודרג | זיהוי פנים |
| רשת פנים (מידע) | שודרג | זיהוי נקודות ציון בפנים |
| Iris (מידע) | שודרג | זיהוי נקודות ציון בפנים |
| ידיים (מידע) | שודרג | זיהוי נקודות ציון של היד |
| תנוחה (מידע) | שודרג | זיהוי נקודות ציון של תנוחות |
| הוליסטי (מידע) | שדרוג | זיהוי הוליסטי של ציוני דרך |
| פילוח של תמונות סלפי (מידע) | שודרג | חלוקת תמונות למקטעים |
| חלוקת שיער למקטעים (מידע) | שודרג | חלוקת תמונות למקטעים |
| זיהוי אובייקטים (מידע) | שודרג | זיהוי אובייקטים |
| מעקב אחרי ארגזים (מידע) | התמיכה הסתיימה | |
| מעקב תנועה מיידי (מידע) | התמיכה הסתיימה | |
| Objectron (מידע) | התמיכה הסתיימה | |
| KNIFT (info) | התמיכה הסתיימה | |
| היפוך אוטומטי (מידע) | התמיכה הסתיימה | |
| MediaSequence (info) | התמיכה הסתיימה | |
| YouTube 8M (מידע) | התמיכה הסתיימה |