Лучшее использование приложения ARCore

Эвриес

Сканируйте окружающие вас предметы и превращайте их в уникальных, игривых, интерактивных персонажей.

Что он делает

С приложением everies, работающим на основе технологии Gemini, ваши окружающие предметы оживают с уникальными, игривыми, интерактивными персонажами «everies». Просто просканируйте окружающие предметы камерой, и глаза everies появятся на предметах.
Нажатие на эти глаза генерирует персонажа с особой личностью, внешностью, диалогами и голосом, все это подогнано под конкретный объект, среду и контекст. Вы также можете нажать на любой объект и сгенерировать любого персонажа, даже если глаз изначально не появляется.
Каждый персонаж может участвовать в непрерывном разговоре через ваш голосовой ввод, улучшая взаимодействие. Вы также можете сохранять ваши любимые эпизоды и памятные сцены.

Уникальная способность everies превращать «все» в интерактивных, игривых персонажей является выдающейся особенностью технологии LLM, упрощая опыт и делая его более удобным для пользователя. Процесс автоматизирован API Gemini, с обнаружением объектов на базе TensorFlow Lite и генерацией персонажей через файлы JSON. Позиционирование глаз определяется с высокой частотой кадров с использованием обнаружения объектов на устройстве в сочетании с AR. ARCore закрепляет глаза и лица персонажей, в то время как обнаружение с высокой частотой кадров и многомодальный LLM (Gemini) обеспечивают быструю реакцию и высококачественный опыт.

В настоящее время Everyes находится на стадии бета-тестирования в качестве доказательства концепции, однако планируется его официальный релиз с будущими обновлениями, включающими непрерывные разговоры с любимыми Everyes и функции записи видео.

Построено с

  • андроид
  • ARCore
  • TensorFlow Lite
  • Модель EfficientDet для обнаружения объектов

Команда

К

Команда каждый

От

Япония

Проспера

Самое полезное приложение / Лучшее приложение Flutter