재활용 어드바이저 3D

기능

재활용 어드바이저 3D는 사진을 업로드하고 말하는 3D 아바타로부터 재활용 관련 조언을 받을 수 있는 웹 앱입니다. 해당하는 경우 사진에 표시된 유형의 물건을 수락하는 가장 가까운 재활용 센터도 아바타에 표시됩니다. 쓰레기 관리를 담당하는 지방자치단체는 웹사이트에 앱을 구성요소로 삽입하여 적절한 폐기 방법을 홍보하고 주민을 지원할 수 있습니다. 각 구성요소는 현지 재활용 센터 및 현지 가이드라인에 관한 정보를 포함하도록 현지화할 수 있습니다. 3D 캐릭터, 언어, 음성을 변경할 수도 있습니다. 이 앱은 재활용을 쉽고 재미있고 흥미롭게 만들어 환경 보호에 도움이 됩니다.

이 앱은 File API를 사용하여 사진을 Gemini에 업로드하고 멀티턴 함수 호출을 활용하여 멀티모달 Gemini API를 호출합니다. 첫 번째 차례에서 Gemini는 사진의 항목을 분류하고 항목의 카테고리를 기반으로 더 자세한 정보를 요청합니다. 최종 텍스트 응답 스트림은 Google Cloud 텍스트 음성 변환 AI 음성을 사용하여 실시간으로 말하고 립싱크할 수 있는 애니메이션 3D 아바타로 전달되며, 청각 장애인이나 난청자를 위한 자막이 함께 표시됩니다. Gemini는 아바타가 말할 응답을 생성할 뿐만 아니라 키워드와 그림 이모티콘을 사용하여 동작과 표정을 제어합니다. 가장 가까운 지역 재활용 센터는 Gemini 응답 및 사용자 위치를 기반으로 계산되며 Google 지도 정적 API에서 생성한 지도와 함께 표시됩니다.