Hộp đựng ảnh dành cho trẻ em

Ý nghĩa

Chúng tôi đề xuất "Photobox for Kids" (Hộp ảnh cho trẻ em), một hệ thống tương tác sử dụng công nghệ nhận dạng đa phương thức để tăng cường hoạt động tương tác gia đình và giáo dục mầm non. Bộ công cụ này có hai thành phần chính: một Camera AI để trẻ chụp ảnh các vật thể hoặc khoảnh khắc gia đình và một Hộp ảnh để trẻ học tập một cách tương tác tại nhà. Cha mẹ có thể chụp các vật dụng trong nhà để Mô hình ngôn ngữ-hình ảnh (VLM) sử dụng nhằm tạo nội dung giáo dục phù hợp. Hệ thống sử dụng "Chuỗi suy nghĩ" để chuyển từ các truy vấn đơn giản đến các nội dung giải thích phức tạp. Khi các phần tử con chụp các mục đã đăng ký, hệ thống sẽ xác định và mô tả các mục đó. Các mặt hàng chưa đăng ký sẽ kích hoạt nội dung mô tả do mô hình Gemini 1.5 tạo. Phương thức chụp ảnh đơn giản này tạo ra nội dung hỏi đáp phong phú, kích thích sự tò mò và sự hiểu biết. Một chương trình thí điểm tại một trường mẫu giáo quốc tế cho thấy trẻ em có thể nhớ lại 70% trong số 100 đối tượng đã đăng ký. Máy ảnh AI ghi lại những khoảnh khắc gia đình và Hộp ảnh cung cấp nội dung tương tác phong phú khi trẻ em giới thiệu ảnh in. Hệ thống này mở rộng công việc trước đây về HCI bằng cách sử dụng mô hình Gemini cho nội dung tương tác phong phú hơn. Các nghiên cứu đang diễn ra đang xác thực hiệu quả của tính năng này trong việc tăng cường hoạt động tương tác giữa các thành viên trong gia đình.