Recycling Advisor 3D

Fungsinya

Recycling Advisor 3D adalah aplikasi web tempat Anda dapat mengupload foto dan menerima saran daur ulang dari avatar 3D yang berbicara. Jika berlaku, avatar juga akan menyarankan pusat daur ulang terdekat yang menerima jenis item yang ditampilkan dalam foto. Entitas pemerintah daerah yang bertanggung jawab atas pengelolaan sampah dapat menyematkan aplikasi sebagai komponen di situs mereka untuk mempromosikan metode pembuangan yang tepat dan membantu warga mereka. Setiap komponen dapat dilokalkan untuk menyertakan informasi tentang pusat daur ulang lokal dan pedoman lokal. Anda juga dapat mengubah karakter 3D, bahasa, dan/atau suara. Dengan membuat daur ulang menjadi mudah, menyenangkan, dan menarik, aplikasi ini membantu melindungi lingkungan.

Aplikasi mengupload foto ke Gemini menggunakan File API-nya dan melakukan panggilan Gemini API multimodal menggunakan panggilan fungsi multi-giliran. Pada giliran pertama, Gemini mengklasifikasikan item dalam foto dan meminta informasi yang lebih mendetail berdasarkan kategori item. Streaming respons teks akhir diarahkan ke avatar 3D animasi yang dapat berbicara dan menyinkronkan bibir secara real-time menggunakan suara AI Text-to-Speech Google Cloud, yang disertai dengan subtitel untuk orang yang tunarungu atau mengalami gangguan pendengaran. Gemini tidak hanya menghasilkan respons untuk diucapkan avatar, tetapi juga mengontrol gestur dan ekspresi wajahnya menggunakan kata kunci dan emoji. Pusat daur ulang lokal terdekat dihitung berdasarkan respons Gemini dan lokasi pengguna, serta ditampilkan dengan peta yang dibuat oleh Google Maps Static API.