Photobox per bambini

Descrizione

Proponiamo "Photobox for Kids", un sistema interattivo che utilizza il riconoscimento multimodale per migliorare le interazioni familiari e l'educazione della prima infanzia. È composto da due componenti principali: una fotocamera IA per consentire ai bambini di scattare foto di oggetti o momenti familiari e una Photobox per l'apprendimento interattivo a casa. I genitori possono scattare foto di oggetti domestici, che un modello di visione e linguaggio (VLM) utilizza per generare contenuti didattici personalizzati. Il sistema utilizza una "catena di pensiero" per passare da semplici query a spiegazioni complesse. Quando i bambini acquisiscono gli elementi registrati, il sistema li identifica e li descrive. Gli articoli non registrati attivano le descrizioni generate dal modello Gemini 1.5. Questo semplice metodo di acquisizione di foto genera contenuti dettagliati con domande e risposte, stimolando la curiosità e la comprensione. Un progetto pilota in un asilo internazionale ha dimostrato che i bambini ricordavano il 70% di 100 oggetti registrati. La fotocamera IA immortala i momenti in famiglia e la fototessera offre contenuti interattivi quando i bambini mostrano le foto stampate. Questo sistema amplia il lavoro precedente sull'HCI utilizzando il modello Gemini per contenuti interattivi più completi. Studi in corso ne stanno convalidando l'efficacia nel migliorare le interazioni familiari.