שיפור האינטראקציות המשפחתיות של ילדים באמצעות Gemini.
תיאור
אנחנו מציעים את 'Photobox for Kids', מערכת אינטראקטיבית שמשתמשת בזיהוי מולטי-מודאלי כדי לשפר את האינטראקציות המשפחתיות ואת החינוך לגיל הרך. הוא כולל שני רכיבים עיקריים: מצלמת AI שבעזרתה הילדים יכולים לצלם אובייקטים או רגעים משפחתיים, ו-Photobox ללמידה אינטראקטיבית בבית. הורים יכולים לצלם פריטים ביתיים, שמודל שילוב של ראייה ושפה (VLM) משתמש בהם כדי ליצור תוכן חינוכי מותאם אישית. המערכת משתמשת ב 'שרשרת מחשבות' כדי לעבור משאילתות פשוטות להסברים מורכבים. כשהילדים מצלמים פריטים רשומים, המערכת מזהה אותם ומתארת אותם. פריטים לא רשומים מפעילים תיאורים שנוצרו על ידי מודל Gemini 1.5. שיטת הצילום הפשוטה הזו יוצרת תוכן נרחב של שאלות ותשובות, שמעודדת את הסקרנות וההבנה. במסגרת פיילוט בגן בינלאומי, הילדים הצליחו לזכור 70% מתוך 100 אובייקטים רשומים. מצלמת ה-AI מתעדת את הרגעים המשפחתיים, וה-Photobox מספק תוכן אינטראקטיבי עשיר כשהילדים מציגים את התמונות המודפסות. המערכת הזו מרחיבה את העבודה הקודמת בתחום HCI באמצעות שימוש במודל Gemini ליצירת תוכן אינטראקטיבי עשיר יותר. מחקרים מתמשכים מאשרים את היעילות של השימוש בו לשיפור האינטראקציות המשפחתיות.
מבוסס על
Android
קבוצה
על ידי
Photobox לילדים
מאת
ארצות הברית
[[["התוכן קל להבנה","easyToUnderstand","thumb-up"],["התוכן עזר לי לפתור בעיה","solvedMyProblem","thumb-up"],["סיבה אחרת","otherUp","thumb-up"]],[["חסרים לי מידע או פרטים","missingTheInformationINeed","thumb-down"],["התוכן מורכב מדי או עם יותר מדי שלבים","tooComplicatedTooManySteps","thumb-down"],["התוכן לא עדכני","outOfDate","thumb-down"],["בעיה בתרגום","translationIssue","thumb-down"],["בעיה בדוגמאות/בקוד","samplesCodeIssue","thumb-down"],["סיבה אחרת","otherDown","thumb-down"]],[],[],[],null,["# Photobox for Kids\n\n[More Apps](/competition/vote) \n\nPhotobox for Kids\n=================\n\nEnhancing family interactions for Kids utilizing Gemini. \nVote \nVoted!\nWhat it does\n\nWe propose \"Photobox for Kids,\" an interactive system using multi-modal recognition to enhance family interactions and early childhood education. It has two main components: an AI Camera for children to capture objects or family moments, and a Photobox for interactive learning at home. Parents can capture household items, which a Vision-Language Model (VLM) uses to generate tailored educational content. The system employs a 'Chain of Thought' to progress from simple queries to complex explanations. When children capture registered items, the system identifies and describes them. Unregistered items trigger descriptions generated by the Gemini 1.5 model. This simple photo capture method generates extensive Q\\&A content, promoting curiosity and understanding. A pilot in an international kindergarten showed children recalling 70% of 100 registered objects. The AI Camera captures family moments, and the Photobox provides rich interactive content when children present the printed photos. This system extends previous HCI work by using the Gemini model for richer interactive content. Ongoing studies are validating its effectiveness in enhancing family interactions. \nBuilt with\n\n- Android \nTeam \nBy\n\nPhotobox for Kids \nFrom\n\nUnited States \n[](/competition/vote)"]]
