SmartAvatar

Fungsinya

Aplikasi kami mengubah live streaming menjadi pengalaman interaktif tempat penonton dapat mengajukan pertanyaan melalui chat YouTube dan menerima jawaban secara real time dari avatar Einstein yang didukung AI. Aplikasi ini memanfaatkan Gemini API untuk memproses dan membuat respons atas pertanyaan audiens. Saat diterima, pertanyaan akan dikirim ke Gemini API untuk mendapatkan respons, sekaligus dikonversi menjadi audio melalui layanan text-to-speech. Audio ini kemudian disinkronkan dengan avatar Einstein yang mendukung sinkronisasi bibir di Unity3D, sehingga menciptakan ilusi bahwa Einstein berbicara langsung kepada penonton. Seluruh prosesnya disiarkan secara live di YouTube, sehingga penonton dapat melihat pertanyaan, nama, dan foto mereka ditampilkan di layar saat Einstein merespons. Untuk memastikan operasi yang lancar, pertanyaan dimasukkan ke dalam antrean dan diproses secara berurutan, dengan pertanyaan dan respons dikelola secara teratur. Integrasi Gemini API adalah kunci untuk memberikan respons yang akurat dan tepat waktu, sehingga pengalaman menjadi dinamis dan menarik bagi pengguna.