Fotobox für Kinder

Funktion

Wir schlagen „Photobox for Kids“ vor, ein interaktives System, das multimodale Erkennung nutzt, um Familieninteraktionen und die frühkindliche Bildung zu verbessern. Es besteht aus zwei Hauptkomponenten: einer KI-Kamera, mit der Kinder Objekte oder Familienmomente aufnehmen können, und einer Fotobox für interaktives Lernen zu Hause. Eltern können Haushaltsgegenstände aufnehmen, die dann mithilfe eines Vision-Language-Modells (VLM) in individuelle Lerninhalte umgewandelt werden. Das System verwendet eine „Denkkette“, um von einfachen Suchanfragen zu komplexen Erklärungen überzugehen. Wenn Kinder registrierte Objekte erfassen, werden diese vom System erkannt und beschrieben. Für nicht registrierte Artikel werden Beschreibungen generiert, die vom Gemini 1.5-Modell stammen. Diese einfache Methode zur Fotoaufnahme generiert umfangreiche Inhalte mit Fragen und Antworten, die Neugier und Verständnis fördern. Ein Pilotprojekt in einem internationalen Kindergarten zeigte, dass Kinder 70% von 100 registrierten Objekten wiedererkennen konnten. Die KI-Kamera hält Familienmomente fest und die Fotobox bietet umfangreiche interaktive Inhalte, wenn Kinder die gedruckten Fotos präsentieren. Dieses System erweitert bisherige HCI-Arbeiten, indem das Gemini-Modell für umfangreichere interaktive Inhalte verwendet wird. Laufende Studien bestätigen seine Wirksamkeit bei der Verbesserung der Familieninteraktionen.