Moonect

Funktion

Mit der App können Nutzer ein Foto mit ihrem Smartphone aufnehmen, das dann zur Analyse an die Gemini API gesendet wird. Die API erkennt verschiedene Objekte im Bild und gibt eine Liste der relevanten Dinge im Bild zurück. Wenn Nutzer ein Keyword aus dieser Liste auswählen, werden sie sofort mit einem globalen Gruppenchat verbunden, in dem andere über dasselbe Thema sprechen. Außerdem können Nutzer mit einer KI speziell über das ausgewählte Thema chatten, um ihr Lernen zu verbessern und die Verbindung zu ihrer Umgebung zu stärken. Diese Funktion bietet auch Trost für diejenigen, die sich einsam fühlen oder eine positive Ablenkung brauchen. Sie wurde von Konzepten aus „The Power of Now“ inspiriert und hilft dabei, soziale Ängste zu reduzieren.

Das Potenzial der App ist enorm. Wir könnten beispielsweise mit Marken wie Coca-Cola zusammenarbeiten, bei denen Nutzer ein Foto von einem Produkt aufnehmen können, um einem speziellen Gruppenchat beizutreten und auf exklusive Angebote zuzugreifen. Freunde könnten ein geheimes Objekt als Passwort verwenden, um private Gruppen zu erstellen. Es gibt noch viele weitere Möglichkeiten.

Ich habe das Gemini-1.5-Flash-Modell sowohl für die Bildanalyse als auch für die KI-Chatfunktion verwendet, da es effizient ist und für dieses MVP genaue Antworten liefert. Um für Sicherheit und Angemessenheit zu sorgen, haben wir Filter mithilfe der Funktion „HarmCategory“ der Gemini API implementiert. Der Chat wird in Firebase Firestore gespeichert und wir haben auch Google Sign In von Firebase Authentications verwendet.