Recycling Advisor 3D

Działanie

Recycling Advisor 3D to aplikacja internetowa, w której możesz przesłać zdjęcie i otrzymać porady dotyczące recyklingu od mówiącego awatara 3D. W stosownych przypadkach przedstawia on też najbliższe centrum recyklingu, które przyjmuje typ produktów widocznych na zdjęciu. Instytucje samorządowe odpowiedzialne za gospodarkę odpadami mogą osadzić aplikację w swoich witrynach, aby promować prawidłowe metody utylizacji i pomagać mieszkańcom. Każdy komponent może być zlokalizowany, aby zawierać informacje o lokalnych punktach recyklingu i lokalnych wytycznych. Możesz też zmienić postać 3D, język lub głos. Aplikacja ułatwia, uatrakcyjnia i ubarwia proces recyklingu, co pomaga chronić środowisko.

Aplikacja przesyła zdjęcie do Gemini za pomocą interfejsu File API i wywołuje interfejs Gemini API w ramach multimodalnych wywołań funkcji. Na pierwszym etapie Gemini klasyfikuje elementy na zdjęciu i prosi o bardziej szczegółowe informacje na podstawie kategorii elementów. Ostateczny strumień odpowiedzi tekstowej jest kierowany do animowanego awatara 3D, który może mówić i synchronizować ruchy warg w czasie rzeczywistym za pomocą głosów AI do zamiany tekstu na mowę w Google Cloud. Towarzyszą im napisy dla osób niesłyszących lub niedosłyszących. Gemini nie tylko generuje odpowiedzi, które wygłasza awatar, ale też kontroluje jego gesty i mimikę za pomocą słów kluczowych i emotikonów. Najbliższe lokalne centrum recyklingu jest obliczane na podstawie odpowiedzi Gemini i lokalizacji użytkownika, a następnie przedstawiane na mapie wygenerowanej przez interfejs API Google Maps Static.