Smoothie
Prototyp für die Anzeige von generativer KI-Ausgabe mithilfe von geolokalisierter AR.
Funktion
Smoothy ist ein Prototyp für die Darstellung von generativer KI-Ausgabe mithilfe von geolokalisierter AR.
Ich wollte den richtigen Kontext und die richtige Aufgabe finden, in denen sowohl die Ausgabewerte der generativen KI als auch die physischen Standorte in geolokalisierter AR gemeinsam untersucht werden. Eine App für die Reiseunterstützung eignete sich dafür perfekt. Ich entschied mich für die Harvard Bridge, die Boston und Cambridge/MIT mit ihren markierten reibungslosen Übergängen verbindet. (Weitere Informationen zu „Smoot“ finden Sie unter https://de.wikipedia.org/wiki/Smoot.)
Im Smoothy-Prototyp wird der Gemini API eine Smoot-Markierungsnummer entlang der Brücke zugewiesen und sie wird aufgefordert, einige relevante Informationen zu MIT und dieser Nummer zurückzugeben. Mit Geospatial Creator und Aero werden die Informationen dann an der Position der entsprechenden Smoot-Markierung angezeigt.
In der aktuellen Version können in Aero keine externen Live-Assets oder ‑Daten verwendet werden. Daher musste ich dies als zwei separate Prozesse prototypisieren, bei denen ich zuerst die Informationen generierte und dann geeignete Assets für Geospatial Creator + Aero erstellte. Eine Echtzeitversion wäre mit Aero möglich, wenn eine zukünftige Version den Zugriff auf Livedaten ermöglicht.
Basis
- ARCore
Team
Von
Jung-Hoon Seo
Von
USA