Photobox untuk Anak-Anak

Fungsinya

Kami mengusulkan "Photobox for Kids", sebuah sistem interaktif yang menggunakan pengenalan multi-modal untuk meningkatkan interaksi keluarga dan pendidikan anak usia dini. Alat ini memiliki dua komponen utama: Kamera AI untuk anak-anak merekam objek atau momen keluarga, dan Photobox untuk pembelajaran interaktif di rumah. Orang tua dapat mengambil gambar item rumah tangga, yang digunakan Model Bahasa-Visi (VLM) untuk membuat konten edukasi yang disesuaikan. Sistem ini menggunakan 'Rantai Pemikiran' untuk beralih dari kueri sederhana ke penjelasan yang kompleks. Saat anak-anak mengambil item terdaftar, sistem akan mengidentifikasi dan mendeskripsikannya. Item yang tidak terdaftar memicu deskripsi yang dibuat oleh model Gemini 1.5. Metode pengambilan foto sederhana ini menghasilkan konten tanya jawab yang luas, yang mendorong rasa ingin tahu dan pemahaman. Uji coba di taman kanak-kanak internasional menunjukkan bahwa anak-anak mengingat 70% dari 100 objek terdaftar. Kamera AI merekam momen keluarga, dan Photobox menyediakan konten interaktif yang kaya saat anak-anak mempresentasikan foto cetak. Sistem ini memperluas pekerjaan HCI sebelumnya dengan menggunakan model Gemini untuk konten interaktif yang lebih kaya. Studi yang sedang berlangsung memvalidasi efektivitasnya dalam meningkatkan interaksi keluarga.