Zentale

Fotos von Spielzeug in lustige und lehrreiche Geschichten für Kinder verwandeln

Funktion

Zentale ist eine Android-App, die mithilfe der Google Gemini AI API Fotos von Spielzeug in lustige und lehrreiche Geschichten umwandelt.
Wie funktioniert die App?
Nutzer können sich mit ihrem Google-Konto in Zentale anmelden. Mit der One Tap Compose-Bibliothek dauert die Anmeldung weniger als zwei Sekunden. Wenn sich der Nutzer zum ersten Mal anmeldet, gibt es im Backend eine Firebase onCreate-Funktion, die jedem Konto automatisch Textstory-Credits zuweist.
Nach der Anmeldung können Nutzer ein Spielzeugfoto in einer einfachen Schritt-für-Schritt-Anleitung in eine Textstory umwandeln:
1. Nehmen Sie ein neues Foto des Spielzeugs auf oder fügen Sie ein Foto aus der Galerie hinzu.
Optional: Wählen Sie die Ausgabesprache für die Story aus. Derzeit stehen Englisch, Spanisch und Rumänisch zur Auswahl. Wenn Sie keine auswählen, ist die Story auf Englisch.
2. Tippen Sie auf „Story erstellen“ und warten Sie, bis die Erstellung abgeschlossen ist.
Wenn Nutzer auf die Schaltfläche „Story erstellen“ tippen, passiert im Hintergrund Folgendes:
– Das Spielzeugfoto wird Firebase Storage hinzugefügt, wodurch eine Bild-URL zurückgegeben wird.
– Ich sende die Bild-URL an meine Node.js-API, die die Gemini-KI-API verwendet.
Gemini-1.5-Flash wandelt das Bild in einen Storytitel um. Anschließend verwende ich den Titel, um den Inhalt der Geschichte zu erstellen, indem ich dasselbe Modell aufrufe.
– Sobald Gemini die Geschichte erstellt hat, wird sie in Firestore gespeichert.
– Wenn die Android-App eine erfolgreiche Antwort erhält, verwende ich die Story-ID, um die Story aus Firestore abzurufen.

Basis

  • Android
  • Firebase
  • Google Cloud – App Engine

Team

Von

Dragos Georgian Ivanov

Von

Rumänien