Smoothie

Działanie

Smoothy to prototyp wyświetlania wyników generatywnej AI za pomocą rzeczywistości rozszerzonej z lokalizacją geograficzną.

Chciałem znaleźć odpowiedni kontekst i zadania, w których można by badać jednocześnie wartości wyjściowe generatywnej AI i lokalizacje fizyczne w rzeczywistości rozszerzonej z lokalizacją geograficzną. W tym przypadku idealnie nadaje się aplikacja do pomocy w podróży. Wybrałem most Harvard Bridge, który łączy Boston z Cambridge/MIT i ma pomalowane na żółto oznakowanie poziome. (Więcej informacji o smoot znajdziesz na stronie https://en.wikipedia.org/wiki/Smoot)

W prototypie Smoothy interfejs Gemini API otrzymuje numer znacznika smoot na moście i jest proszony o zwrócenie pewnych istotnych informacji dotyczących MIT i tego numeru. Następnie Geospatial Creator + Aero służy do wyświetlania informacji w lokalizacji odpowiadającego im znacznika Smoot.

Pamiętaj, że w obecnej wersji Aero nie może przyjmować aktywów ani danych zewnętrznych w czasie rzeczywistym. Dlatego musiałem utworzyć prototyp w ramach 2 oddzielnych procesów: najpierw wygenerowałem informacje, a potem utworzyłem odpowiednie komponenty dla Geospatial Creator i Aero. Wersja w czasie rzeczywistym będzie możliwa w przypadku Aero, jeśli przyszła wersja umożliwi dostęp do danych na żywo.