Эверис

Что он делает

С помощью приложенияeveries, созданного на основе технологии Gemini, окружающие вас объекты оживут благодаря уникальным, игривым, интерактивным персонажам «everies». Просто сканируйте окружающие вас объекты с помощью камеры, и на них появятся глаза каждого.
Нажатие на эти глаза создает персонажа с ярко выраженной индивидуальностью, внешностью, диалогами и голосом, адаптированными к конкретному объекту, окружающей среде и контексту. Вы также можете нажать на любой объект и создать каждого персонажа, даже если глаз изначально не появляется.
Каждый персонаж может участвовать в непрерывном разговоре с помощью вашего голосового ввода, что улучшает взаимодействие. Вы также можете сохранить свои любимые эпизоды и памятные сцены.

Единственная способность Everies превращать «все» в интерактивных игривых персонажей является выдающейся особенностью технологии LLM, упрощающей работу и делающей ее более удобной для пользователя. Процесс автоматизирован с помощью Gemini API, с обнаружением объектов на базе TensorFlow Lite и генерацией символов с помощью файлов JSON. Положение глаз определяется при высокой частоте кадров с помощью обнаружения объектов на устройстве в сочетании с дополненной реальностью. ARCore фиксирует глаза и лица персонажей, а обнаружение с высокой частотой кадров и мультимодальный LLM (Gemini) обеспечивают быстрый отклик и высокое качество изображения.

В настоящее время находится в стадии бета-тестирования в качестве доказательства концепции. Everies стремится к официальному выпуску с будущими обновлениями, включая непрерывные разговоры с любимыми пользователями и функции записи видео.