RA de SANT

Qué hace

Nuestra app permite que los niños armen juguetes de cartón SCABO con instrucciones detalladas en 3D. Luego, los niños pueden convertir los juguetes de cartón en juguetes inteligentes en RA con las capacidades de IA de Gemini. Nuestra app puede detectar y hacer un seguimiento de la posición 3D de los juguetes de cartón en tiempo real con nuestro propio algoritmo de visión por computadora 3D. Usamos las capacidades de Gemini 1.5 Pro, como la visión y la finalización de texto, para convertirnos en asistentes de IA para que los niños aprendan temas científicos. Nuestro sistema de inventario en 3D incluye más de 500 simulaciones de anatomía humana, mecánica y modelos espaciales. Para diseñar las simulaciones en 3D, texturizamos los modelos en 3D con diferentes colores para las diferentes partes de los objetos científicos para evitar alucinaciones de IA. La IA de Gemini reconoce mejor las simulaciones virtuales y ofrece mejores explicaciones para los niños. Además, usamos la API de Gemini para detectar objetos en las escenas científicas. Dada la imagen que incluye los modelos virtuales en 3D en primer plano o el artefacto real, y una pregunta de los usuarios, como "¿Dónde está el engranaje diferencial?", la detección de objetos de IA de Gemini puede detectar la posición 2D de las piezas. Luego, tenemos el algoritmo de asignación 3D para asignar la posición 2D al objeto científico. Por último, recomendamos a los niños que reutilicen sus juguetes de plástico existentes en el modo de historias de juguetes de RA. La API de Gemini se usa para generar las historias de ciencia ficción entre los científicos virtuales y el juguete de plástico. Los niños pueden aprender y hablar con simulaciones virtuales en 3D o con sus propios juguetes en un contexto científico. Todas las simulaciones en 3D son gratuitas y se realizan sobre la marcha.