Руководство по решениям MediaPipe

MediaPipe Solutions предоставляет набор библиотек и инструментов, позволяющих быстро применять методы искусственного интеллекта (ИИ) и машинного обучения (МО) в ваших приложениях. Вы можете сразу подключить эти решения к своим приложениям, настроить их в соответствии со своими потребностями и использовать на нескольких платформах разработки. MediaPipe Solutions является частью проекта MediaPipe с открытым исходным кодом , поэтому вы можете дополнительно настраивать код решения в соответствии с потребностями вашего приложения. Пакет MediaPipe Solutions включает в себя следующее:

Схема решений MediaPipe Solutions, Studio и Model Maker

Эти библиотеки и ресурсы обеспечивают основные функции для каждого решения MediaPipe:

  • Задачи MediaPipe : кроссплатформенные API и библиотеки для развертывания решений. Узнать больше
  • Модели MediaPipe : предварительно обученные, готовые к использованию модели для использования с каждым решением.

Эти инструменты позволяют настраивать и оценивать решения:

  • MediaPipe Model Maker : настраивайте модели для решений на основе ваших данных. Узнать больше
  • MediaPipe Studio : визуализируйте, оценивайте и сравнивайте решения в своем браузере. Узнать больше

Доступные решения

Решения MediaPipe доступны на нескольких платформах. Каждое решение включает одну или несколько моделей. Для некоторых решений также можно настроить модели. В следующем списке показано, какие решения доступны для каждой поддерживаемой платформы и можно ли использовать Model Maker для настройки модели:

Решение Андроид Интернет Питон iOS Настроить модель
API вывода LLM заполненный кругзаполненный кругзаполненный кругзаполненный круг
Обнаружение объектов заполненный кругзаполненный кругзаполненный кругзаполненный кругзаполненный круг
Классификация изображений заполненный кругзаполненный кругзаполненный кругзаполненный кругзаполненный круг
Сегментация изображений заполненный кругзаполненный кругзаполненный круг
Интерактивная сегментация заполненный кругзаполненный кругзаполненный круг
Обнаружение ориентиров рук заполненный кругзаполненный кругзаполненный кругзаполненный круг
Распознавание жестов заполненный кругзаполненный кругзаполненный кругзаполненный кругзаполненный круг
Встраивание изображений заполненный кругзаполненный кругзаполненный круг
Распознавание лиц заполненный кругзаполненный кругзаполненный кругзаполненный круг
Обнаружение ориентиров лица заполненный кругзаполненный кругзаполненный круг
Стилизация лица заполненный кругзаполненный кругзаполненный кругзаполненный круг
Обнаружение ориентиров позы заполненный кругзаполненный кругзаполненный круг
Генерация изображений заполненный кругзаполненный круг
Классификация текста заполненный кругзаполненный кругзаполненный кругзаполненный кругзаполненный круг
Встраивание текста заполненный кругзаполненный кругзаполненный круг
Детектор языка заполненный кругзаполненный кругзаполненный круг
Аудио классификация заполненный кругзаполненный кругзаполненный круг

Начать

Вы можете начать работу с MediaPipe Solutions, выбрав любую из задач, перечисленных в левом дереве навигации, включая задачи по зрению , тексту и аудио . Если вам нужна помощь в настройке среды разработки для использования с задачами MediaPipe, ознакомьтесь с руководствами по настройке для Android , веб-приложений и Python .

Устаревшие решения

Мы прекратили поддержку устаревших решений MediaPipe, перечисленных ниже, с 1 марта 2023 г. Все остальные устаревшие решения MediaPipe будут обновлены до нового решения MediaPipe. Подробности смотрите в списке ниже. Репозиторий кода и готовые двоичные файлы для всех устаревших решений MediaPipe будут по-прежнему предоставляться «как есть».

Устаревшее решение Положение дел Новое решение MediaPipe
Распознавание лиц ( информация ) Модернизированный Распознавание лиц
Лицевая сетка ( информация ) Модернизированный Обнаружение ориентиров лица
Ирис ( информация ) Модернизированный Обнаружение ориентиров лица
Руки ( информация ) Модернизированный Обнаружение ориентиров рук
Поза ( информация ) Модернизированный Обнаружение ориентиров позы
Холистический ( информация ) Обновление Комплексное обнаружение ориентиров
Сегментация селфи ( информация ) Модернизированный Сегментация изображений
Сегментация волос ( информация ) Модернизированный Сегментация изображений
Обнаружение объектов ( информация ) Модернизированный Обнаружение объектов
Отслеживание коробки ( информация ) Поддержка прекращена
Мгновенное отслеживание движения ( информация ) Поддержка прекращена
Объектрон ( информация ) Поддержка прекращена
НОЖ ( информация ) Поддержка прекращена
АвтоФлип ( информация ) Поддержка прекращена
МедиаСеквенция ( информация ) Поддержка прекращена
Ютуб 8М ( информация ) Поддержка прекращена