מדריך לזיהוי פנים

המשימה MediaPipe Face Detector מאפשרת לזהות פנים בתמונה או בסרטון. אפשר להשתמש במשימה הזו כדי לאתר פנים ותווי פנים בתוך פריים. המשימה הזו משתמשת במודל למידת מכונה (ML) שפועל עם תמונות בודדות או עם רצף רציף של תמונות. הפלט של המשימה כולל את מיקומי הפנים, יחד עם נקודות מרכזיות בפנים: עין שמאלית, עין ימנית, קצה האף, פה, טרגוס של עין שמאלית וטרגוס של עין ימנית.

רוצים לנסות?arrow_forward

שנתחיל?

כדי להתחיל להשתמש במשימה הזו, צריך לפעול לפי אחד ממדריכי ההטמעה האלה בהתאם לפלטפורמת היעד שלכם. המדריכים האלה ספציפיים לפלטפורמה ומסבירים איך לבצע הטמעה בסיסית של המשימה הזו, כולל מודל מומלץ ודוגמת קוד עם אפשרויות הגדרה מומלצות:

• ‫Android – דוגמת קוד – מדריך
• ‫Python – דוגמת קוד – מדריך
• אינטרנט – דוגמה לקוד – מדריך
• ‫iOS – דוגמה לקוד – מדריך

פרטי המשימה

בקטע הזה מוסבר על היכולות, הקלטים, הפלטים ואפשרויות ההגדרה של המשימה הזו.

תכונות

• עיבוד תמונת הקלט – העיבוד כולל סיבוב, שינוי גודל, נורמליזציה והמרה של מרחב הצבעים.
• סף הניקוד – סינון התוצאות על סמך ניקוד התחזית.

אפשרויות הגדרה

אלה אפשרויות ההגדרה של המשימה הזו:

מודלים

מודלים של זיהוי פנים יכולים להיות שונים בהתאם לתרחישי השימוש המיועדים שלהם, כמו זיהוי בטווח קצר וזיהוי בטווח ארוך. בנוסף, בדרך כלל המודלים מתפשרים בין ביצועים, דיוק, רזולוציה ודרישות משאבים, ובמקרים מסוימים הם כוללים תכונות נוספות.

המודלים שמפורטים בקטע הזה הם וריאציות של BlazeFace, גלאי פנים קל משקל ומדויק שעבר אופטימיזציה להסקת מסקנות ב-GPU בנייד. מודלים של BlazeFace מתאימים לאפליקציות כמו הערכה של נקודות מרכזיות בפנים בתלת-ממד, סיווג הבעות ופילוח של אזור הפנים. ‫BlazeFace משתמש ברשת קלה להפקת תכונות שדומה ל-MobileNetV1/V2.

BlazeFace (טווח קצר)

מודל קל משקל לזיהוי פנים בודדות או מרובות בתמונות בסגנון סלפי ממצלמת סמארטפון או ממצלמת אינטרנט. המודל עבר אופטימיזציה לתמונות שמצולמות במצלמה הקדמית של הטלפון בטווח קצר. ארכיטקטורת המודל משתמשת בטכניקה של רשת קונבולוציונית Single Shot Detector (SSD) עם מקודד מותאם אישית. מידע נוסף זמין במאמר המחקר בנושא Single Shot MultiBox Detector.

‫BlazeFace (full-range)

מודל קל יחסית לזיהוי פנים בודדות או מרובות בתמונות ממצלמת סמארטפון או ממצלמת אינטרנט. המודל מותאם לתמונות בטווח מלא, כמו תמונות שצולמו במצלמה האחורית של הטלפון. ארכיטקטורת המודל משתמשת בטכניקה דומה לרשת קונבולוציונית של CenterNet עם מקודד מותאם אישית.

BlazeFace Sparse (full-range)

גרסה קלה יותר של מודל BlazeFace הרגיל עם טווח מלא, בערך 60% קטנה יותר בגודל. המודל עבר אופטימיזציה לתמונות בטווח מלא, כמו תמונות שצולמו במצלמה האחורית של הטלפון. ארכיטקטורת המודל משתמשת בטכניקה שדומה לרשת קונבולוציה של CenterNet עם מקודד בהתאמה אישית.

נקודות השוואה של משימות

אלה נקודות ההשוואה של המשימות לכל הפייפליין על סמך המודלים שאומנו מראש שמופיעים למעלה. תוצאת זמן האחזור היא זמן האחזור הממוצע ב-Pixel 6 באמצעות מעבד או GPU.