Hướng dẫn phát hiện mốc khuôn mặt

Nhiệm vụ MediaPipe Face Editioner cho phép bạn phát hiện các điểm mốc khuôn mặt và biểu cảm khuôn mặt trong hình ảnh và video. Bạn có thể sử dụng nhiệm vụ này để xác định biểu cảm khuôn mặt của người, áp dụng bộ lọc và hiệu ứng khuôn mặt cũng như tạo hình đại diện ảo. Nhiệm vụ này sử dụng các mô hình học máy (ML) có thể hoạt động với một hình ảnh đơn lẻ hoặc một luồng hình ảnh liên tục. Nhiệm vụ này sẽ tạo ra các điểm mốc 3 chiều trên khuôn mặt, điểm kết hợp hình dạng (hệ số biểu thị biểu cảm khuôn mặt) để suy ra bề mặt khuôn mặt chi tiết theo thời gian thực và ma trận biến đổi để thực hiện các phép biến đổi cần thiết cho việc kết xuất hiệu ứng.

Hãy dùng thử!arrow_forward

Bắt đầu

Hãy bắt đầu sử dụng tác vụ này bằng cách làm theo một trong các hướng dẫn triển khai cho nền tảng mục tiêu của bạn. Các hướng dẫn dành riêng cho nền tảng này sẽ hướng dẫn bạn cách triển khai cơ bản của tác vụ này, bao gồm cả mô hình được đề xuất và mã ví dụ với các lựa chọn cấu hình được đề xuất:

• Android – Ví dụ về mã – Hướng dẫn
• Python – Ví dụ về mã – Hướng dẫn
• Web – Ví dụ về mã – Hướng dẫn

Thông tin chi tiết về việc cần làm

Phần này mô tả các tính năng, dữ liệu đầu vào, đầu ra và tuỳ chọn cấu hình của tác vụ này.

Tính năng

• Xử lý hình ảnh đầu vào – Xử lý bao gồm việc xoay hình ảnh, đổi kích thước, chuẩn hoá và chuyển đổi không gian màu.
• Ngưỡng điểm số – Lọc kết quả dựa trên điểm dự đoán.

Lựa chọn về cấu hình

Tác vụ này có các chế độ cấu hình sau:

Mô hình

Face Marker sử dụng một loạt mô hình để dự đoán các điểm mốc trên khuôn mặt. Mô hình đầu tiên phát hiện khuôn mặt, mô hình thứ hai xác định điểm mốc trên các khuôn mặt được phát hiện, còn mô hình thứ ba sử dụng các mốc đó để xác định các đặc điểm và biểu hiện khuôn mặt.

Các mô hình sau đây được đóng gói cùng nhau thành một gói mô hình có thể tải xuống:

• Mô hình phát hiện khuôn mặt: phát hiện sự hiện diện của khuôn mặt thông qua một số dấu hiệu quan trọng trên khuôn mặt.
• Mô hình lưới khuôn mặt: thêm bản đồ ánh xạ khuôn mặt hoàn chỉnh. Mô hình này đưa ra ước tính 478 điểm mốc khuôn mặt 3 chiều.
• Mô hình dự đoán hình dạng kết hợp: nhận kết quả từ mô hình lưới khuôn mặt dự đoán 52 điểm hình dạng, là các hệ số biểu thị các biểu cảm khác nhau trên khuôn mặt.

Mô hình phát hiện khuôn mặt là mô hình phạm vi tầm ngắn BlazeFace, một trình phát hiện khuôn mặt nhẹ và chính xác, được tối ưu hoá cho khả năng dự đoán GPU trên thiết bị di động. Để biết thêm thông tin, hãy xem nhiệm vụ Trình phát hiện khuôn mặt.

Hình ảnh bên dưới cho thấy bản đồ ánh xạ đầy đủ các điểm mốc trên khuôn mặt từ kết quả gói mô hình.

Để có chế độ xem chi tiết hơn về các mốc trên khuôn mặt, hãy xem hình ảnh có kích thước đầy đủ.