Gateway

Funktion

Gateway ist eine App für Barrierefreiheit, die das Problem des Mangels an Informationen im Internet in Bezug auf die Abmessungen der Eingänge von Gebäuden auf der ganzen Welt lösen soll. Gateway nutzt die leistungsstarken Bildverarbeitungsfunktionen von Gemini, um Satellitenbilder des Zielgebäudes zu analysieren und Punkte auf den Gehwegen oder Straßen um das Gebäude herum zu finden, die sich neben dem Eingang des Gebäudes befinden. Gateway ruft dann Google Street View-Bilder mit der Google Maps Static API ab, die an diesen Punkten in Richtung des Gebäudes zeigen, und entscheidet mithilfe von Gemini, welche Bilder ein Gebäude mit dem Namen des Zielgebäudes am besten zeigen. Nachdem das beste Bild gefunden wurde, wird ein YOLOv8-Modell zur Türerkennung verwendet, um einen Begrenzungsrahmen um den Eingang im Bild zu zeichnen und seine Breite vorherzusagen.