Toebeans

Description

Toebeans est une application amusante qui vous permet d'obtenir différents types de prédictions pour votre chat. Elle peut générer des lectures de pattes, des horoscopes, vous parler de ses vies passées et vous permettre de lui poser des questions prédéfinies. L'application est actuellement en cours de développement et devrait être publiée à l'automne. Toebeans est une application multiplate-forme Compose qui cible à la fois Android et iOS. Sur Android, la détection d'objets de MediaPipe permet de détecter les pattes de chat à partir du flux de la caméra ou d'une image sélectionnée.

Une fois que nous avons une photo de la patte, l'utilisateur peut obtenir différentes prédictions pour son chat. Sur Android, Vertex AI et Gemini sont utilisés pour générer la réponse à partir de l'invite de prédiction donnée. Sur iOS, il utilise Firebase Functions pour appeler l'API Gemini. En effet, le package Vertex AI pour iOS est actuellement écrit en Swift et n'est pas compatible avec Kotlin Multiplatform. Toebeans utilise également Firebase Remote Config pour pouvoir ajuster les paramètres du modèle et les paramètres des requêtes à distance. ainsi que Firebase Authentication pour l'authentification des utilisateurs (actuellement désactivé).

L'utilisateur peut également "modifier" sa réponse de voyance d'origine pour en obtenir un autre type. L'application prend ensuite la réponse d'origine et demande à Gemini de la réécrire dans un style différent.

À l'avenir, nous prévoyons d'utiliser GenKit au lieu des fonctions Vertex AI et Firebase. Nous sommes également en train d'ajuster un modèle Gemini à l'aide de l'IA Studio.