Улучшение семейного взаимодействия для детей с помощью Gemini.
Что он делает
Мы предлагаем «Photobox for Kids», интерактивную систему, использующую многомодальное распознавание для улучшения семейного взаимодействия и дошкольного образования. Она состоит из двух основных компонентов: камеры AI для детей, чтобы запечатлеть объекты или семейные моменты, и Photobox для интерактивного обучения дома. Родители могут запечатлеть предметы домашнего обихода, которые Vision-Language Model (VLM) использует для создания индивидуального образовательного контента. Система использует «цепочку мыслей» для перехода от простых запросов к сложным объяснениям. Когда дети захватывают зарегистрированные предметы, система идентифицирует и описывает их. Незарегистрированные предметы вызывают описания, созданные моделью Gemini 1.5. Этот простой метод захвата фотографий генерирует обширный контент вопросов и ответов, стимулируя любопытство и понимание. Пилот в международном детском саду показал, что дети вспоминают 70% из 100 зарегистрированных объектов. Камера AI фиксирует семейные моменты, а Photobox предоставляет богатый интерактивный контент, когда дети показывают распечатанные фотографии. Эта система расширяет предыдущую работу HCI, используя модель Gemini для более богатого интерактивного контента. Текущие исследования подтверждают ее эффективность в улучшении семейного взаимодействия.
Построено с
андроид
Команда
К
Фотобокс для детей
От
Соединенные Штаты
[[["Прост для понимания","easyToUnderstand","thumb-up"],["Помог мне решить мою проблему","solvedMyProblem","thumb-up"],["Другое","otherUp","thumb-up"]],[["Отсутствует нужная мне информация","missingTheInformationINeed","thumb-down"],["Слишком сложен/слишком много шагов","tooComplicatedTooManySteps","thumb-down"],["Устарел","outOfDate","thumb-down"],["Проблема с переводом текста","translationIssue","thumb-down"],["Проблемы образцов/кода","samplesCodeIssue","thumb-down"],["Другое","otherDown","thumb-down"]],[],[],[],null,["# Photobox for Kids\n\n[More Apps](/competition/vote) \n\nPhotobox for Kids\n=================\n\nEnhancing family interactions for Kids utilizing Gemini. \nVote \nVoted!\nWhat it does\n\nWe propose \"Photobox for Kids,\" an interactive system using multi-modal recognition to enhance family interactions and early childhood education. It has two main components: an AI Camera for children to capture objects or family moments, and a Photobox for interactive learning at home. Parents can capture household items, which a Vision-Language Model (VLM) uses to generate tailored educational content. The system employs a 'Chain of Thought' to progress from simple queries to complex explanations. When children capture registered items, the system identifies and describes them. Unregistered items trigger descriptions generated by the Gemini 1.5 model. This simple photo capture method generates extensive Q\\&A content, promoting curiosity and understanding. A pilot in an international kindergarten showed children recalling 70% of 100 registered objects. The AI Camera captures family moments, and the Photobox provides rich interactive content when children present the printed photos. This system extends previous HCI work by using the Gemini model for richer interactive content. Ongoing studies are validating its effectiveness in enhancing family interactions. \nBuilt with\n\n- Android \nTeam \nBy\n\nPhotobox for Kids \nFrom\n\nUnited States \n[](/competition/vote)"]]
