Everies

Fungsinya

Dengan aplikasi apa pun, yang didukung teknologi Gemini, objek di sekitar Anda menjadi hidup dengan karakter "everies" yang unik, menyenangkan, dan interaktif. Cukup pindai objek di sekitar dengan kamera, dan mata semua orang akan muncul pada objek tersebut.
Meng ketuk mata ini akan menghasilkan karakter dengan kepribadian, penampilan, dialog, dan suara yang berbeda, semuanya disesuaikan dengan objek, lingkungan, dan konteks tertentu. Anda juga dapat mengetuk objek apa pun dan membuat setiap karakter, meskipun mata awalnya tidak muncul.
Setiap karakter dapat terlibat dalam percakapan berkelanjutan melalui input suara Anda, sehingga meningkatkan interaksi. Anda juga dapat menyimpan kenangan favorit dan adegan berkesan Anda.

Kemampuan satu-satunya yang dapat dipakai untuk mengubah 'segalanya' menjadi karakter interaktif dan lucu adalah fitur unggulan teknologi LLM, yang menyederhanakan pengalaman dan membuatnya lebih mudah digunakan. Proses ini diotomatiskan oleh Gemini API, dengan deteksi objek yang didukung oleh TensorFlow Lite dan pembuatan karakter melalui file JSON. Pemosisian mata ditentukan pada kecepatan frame tinggi menggunakan deteksi objek di perangkat yang digabungkan dengan AR. ARCore mengaitkan mata dan wajah karakter, sementara deteksi kecepatan frame tinggi dan LLM multi-modal (Gemini) memastikan respons yang cepat dan pengalaman berkualitas tinggi.

Saat ini dalam versi beta sebagai bukti konsep, everies bertujuan untuk rilis formal dengan update mendatang, termasuk percakapan berkelanjutan dengan everies favorit dan fitur perekaman video.