Melhorar as interações familiares para crianças usando o Gemini.
O que faz?
Propomos o "Photobox for Kids", um sistema interativo que usa reconhecimento multimodal para melhorar as interações familiares e a educação infantil. Ele tem dois componentes principais: uma câmera com IA para as crianças capturarem objetos ou momentos familiares e uma caixa de fotos para aprendizado interativo em casa. Os pais podem capturar itens domésticos, que um modelo de visão-linguagem (VLM) usa para gerar conteúdo educacional personalizado. O sistema usa uma "cadeia de pensamento" para passar de consultas simples a explicações complexas. Quando as crianças capturam itens registrados, o sistema os identifica e descreve. Os itens não registrados acionavam descrições geradas pelo modelo Gemini 1.5. Esse método simples de captura de fotos gera conteúdo de perguntas e respostas extenso, promovendo curiosidade e compreensão. Um piloto em uma escola infantil internacional mostrou que as crianças se lembram de 70% dos 100 objetos registrados. A Câmera com IA captura momentos familiares, e a Caixa de fotos oferece conteúdo interativo quando as crianças apresentam as fotos impressas. Esse sistema amplia o trabalho anterior de HCI usando o modelo Gemini para conteúdo interativo mais rico. Estudos em andamento estão validando a eficácia dele em melhorar as interações familiares.
Desenvolvido com
Android
Equipe
Por
Cabine de fotos para crianças
De
Estados Unidos
[[["Fácil de entender","easyToUnderstand","thumb-up"],["Meu problema foi resolvido","solvedMyProblem","thumb-up"],["Outro","otherUp","thumb-up"]],[["Não contém as informações de que eu preciso","missingTheInformationINeed","thumb-down"],["Muito complicado / etapas demais","tooComplicatedTooManySteps","thumb-down"],["Desatualizado","outOfDate","thumb-down"],["Problema na tradução","translationIssue","thumb-down"],["Problema com as amostras / o código","samplesCodeIssue","thumb-down"],["Outro","otherDown","thumb-down"]],[],[],[],null,["# Photobox for Kids\n\n[More Apps](/competition/vote) \n\nPhotobox for Kids\n=================\n\nEnhancing family interactions for Kids utilizing Gemini. \nVote \nVoted!\nWhat it does\n\nWe propose \"Photobox for Kids,\" an interactive system using multi-modal recognition to enhance family interactions and early childhood education. It has two main components: an AI Camera for children to capture objects or family moments, and a Photobox for interactive learning at home. Parents can capture household items, which a Vision-Language Model (VLM) uses to generate tailored educational content. The system employs a 'Chain of Thought' to progress from simple queries to complex explanations. When children capture registered items, the system identifies and describes them. Unregistered items trigger descriptions generated by the Gemini 1.5 model. This simple photo capture method generates extensive Q\\&A content, promoting curiosity and understanding. A pilot in an international kindergarten showed children recalling 70% of 100 registered objects. The AI Camera captures family moments, and the Photobox provides rich interactive content when children present the printed photos. This system extends previous HCI work by using the Gemini model for richer interactive content. Ongoing studies are validating its effectiveness in enhancing family interactions. \nBuilt with\n\n- Android \nTeam \nBy\n\nPhotobox for Kids \nFrom\n\nUnited States \n[](/competition/vote)"]]
