SANT AR

기능

이 앱을 사용하면 아이들이 3D 세부 안내를 통해 SCABO 카드보드 장난감을 조립할 수 있습니다. 그런 다음 어린이는 Gemini AI 기능을 사용하여 카드보드 장난감을 AR에서 스마트 장난감으로 바꿀 수 있습니다. 이 앱은 자체 3D 컴퓨터 비전 알고리즘을 사용하여 카드보드 장난감의 3D 위치를 실시간으로 감지하고 추적할 수 있습니다. Google은 비전 및 텍스트 완성을 비롯한 Gemini 1.5 Pro 기능을 활용하여 과학 과목을 학습하는 아동의 AI 어시스턴트가 되고 있습니다. 인체 해부학, 역학, 우주 모델에 관한 500개가 넘는 시뮬레이션을 포함하는 3D 인벤토리 시스템입니다. AI 환각을 방지하기 위해 과학적 객체의 여러 부분에 서로 다른 색상으로 3D 모델에 텍스처를 적용하여 3D 시뮬레이션을 설계했습니다. Gemini AI는 가상 시뮬레이션을 더 잘 인식하고 아이들에게 더 나은 설명을 제공합니다. 또한 Gemini API를 사용하여 과학적 장면에서 물체를 감지합니다. 전경 3D 가상 모델 또는 실제 아티팩트가 포함된 이미지와 '디퍼렌셜 기어는 어디에 있나요?'와 같은 사용자의 질문이 주어지면 Gemini AI 객체 감지가 부품의 2D 위치를 감지할 수 있습니다. 그런 다음 2D 위치를 과학적 객체에 매핑하는 3D 매핑 알고리즘이 있습니다. 마지막으로, AR 장난감 스토리 모드에서 기존 플라스틱 장난감을 재사용하는 것이 좋습니다. Gemini API는 가상 과학자와 플라스틱 장난감 간의 공상과학 이야기를 생성하는 데 사용됩니다. 아이들은 과학적 범위에서 가상 3D 시뮬레이션이나 자신의 장난감으로 배우고 대화할 수 있습니다. 모든 3D 시뮬레이션은 무료로 실시간으로 제공됩니다.