SANT AR

Działanie

Nasza aplikacja pozwala dzieciom składać zabawki z tektury za pomocą szczegółowych instrukcji 3D. Następnie dzieci mogą zamienić te zabawki w inteligentne zabawki w rozszerzonej rzeczywistości dzięki możliwościom sztucznej inteligencji Gemini. Nasza aplikacja może wykrywać i śledzić w czasie rzeczywistym pozycję 3D zabawek z kartonu za pomocą własnego algorytmu widzenia komputerowego 3D. Korzystamy z możliwości Gemini 1.5 Pro, w tym z wizualizacji i uzupełniania tekstu, aby tworzyć asystentów AI dla dzieci uczących się przedmiotów ścisłych. Nasz system zasobów 3D obejmuje ponad 500 symulacji dotyczących anatomii człowieka, mechaniki i modeli kosmicznych. Symulacje 3D zostały zaprojektowane przez nadanie tekstury modelom 3D w różnych kolorach dla różnych części obiektów naukowych, aby zapobiec halucynacjom AI. AI Gemini lepiej rozpoznaje symulacje wirtualne i podaje dzieciom lepsze wyjaśnienia. Ponadto do wykrywania obiektów w scenach naukowych używamy interfejsu Gemini API. Na podstawie obrazu zawierającego trójwymiarowe modele wirtualne lub rzeczywiste artefakty na pierwszym planie oraz pytania od użytkowników, np. „Gdzie jest skrzynia biegów?”, AI do wykrywania obiektów w Gemini może wykryć pozycję 2D części. Następnie mamy algorytm mapowania 3D, który mapuje pozycję 2D na obiekt naukowy. Zachęcamy dzieci do ponownego używania plastikowych zabawek w trybie historii z zabawkami w rozszerzonej rzeczywistości. Interfejs Gemini API służy do generowania historii science fiction o wirtualnych naukowcach i plastikowych zabawkach. Dzieci mogą się uczyć i rozmawiać z wirtualnymi symulacjami 3D lub swoimi zabawkami w naukowym zakresie. Wszystkie symulacje 3D są bezpłatne i na bieżąco.