Консультант по переработке 3D

Что он делает

Recycling Advisor 3D — это веб-приложение, в которое можно загрузить фотографию и получить совет по переработке от говорящего 3D-аватара. Если применимо, аватар также предлагает ближайший центр переработки, который принимает тип предметов, показанных на фотографии. Местные органы власти, ответственные за управление отходами, могут встроить приложение в качестве компонента на свои веб-сайты, чтобы продвигать надлежащие методы утилизации и помогать своим жителям. Каждый компонент можно локализовать, включив в него информацию о местных центрах переработки и местные правила. Также можно изменить 3D-персонажа, язык и/или голос. Делая переработку легкой, веселой и увлекательной, приложение помогает защищать окружающую среду.

Приложение загружает фотографию в Gemini с помощью своего API File и выполняет мультимодальные вызовы API Gemini, используя многооборотный вызов функций. В первую очередь Gemini классифицирует предметы на фотографии и запрашивает более подробную информацию на основе категории предметов. Окончательный поток текстовых ответов направляется анимированному 3D-аватару, который может говорить и синхронизировать губы в режиме реального времени с помощью голосов Google Cloud Text-to-Speech AI, сопровождаемых субтитрами для глухих или слабослышащих людей. Gemini не только генерирует ответ для аватара, но и управляет его жестами и выражением лица с помощью ключевых слов и эмодзи. Ближайший местный центр переработки рассчитывается на основе ответа Gemini и местоположения пользователя и отображается с помощью карты, созданной Google Maps Static API.