Conseiller de recyclage 3D

Prenez une photo et obtenez des conseils de recyclage locaux auprès d'un avatar 3D parlant.

Description

Recycling Advisor 3D est une application Web qui vous permet d'importer une photo et de recevoir des conseils de recyclage d'un avatar 3D parlant. Le cas échéant, l'avatar suggère également le centre de recyclage le plus proche qui accepte le type d'articles représentés sur la photo. Les entités gouvernementales locales chargées de la gestion des déchets peuvent intégrer l'application en tant que composant sur leurs sites Web pour promouvoir les méthodes d'élimination appropriées et aider leurs résidents. Chaque composant peut être localisé pour inclure des informations sur les centres de recyclage et les consignes locales. Vous pouvez également modifier le personnage 3D, la langue et/ou la voix. En rendant le recyclage facile, amusant et interactif, l'application contribue à protéger l'environnement.

L'application importe la photo dans Gemini à l'aide de son API File et effectue des appels d'API Gemini multimodaux à l'aide de l'appel de fonction multitours. Lors du premier échange, Gemini classe les articles de la photo et demande des informations plus détaillées en fonction de leur catégorie. Le flux de réponse textuelle final est dirigé vers un avatar 3D animé qui peut parler et synchroniser les lèvres en temps réel à l'aide des voix d'IA de Google Cloud Speech-to-Text, accompagnées de sous-titres pour les personnes sourdes ou malentendantes. Gemini génère non seulement la réponse que l'avatar doit prononcer, mais contrôle également ses gestes et ses expressions faciales à l'aide de mots clés et d'emojis. Le centre de recyclage local le plus proche est calculé en fonction de la réponse de Gemini et de la position de l'utilisateur. Il est présenté sur une carte générée par l'API Google Maps Static.

Conçu avec

  • Web/Chrome
  • Google Cloud Speech-to-Text
  • Google Maps Platform

Équipe

Par

met4citizen

De

Finlande