Toebeans

Qué hace

Toebeans es una app divertida para obtener diferentes tipos de predicciones para tu gato mascota. Puede generar lecturas de patas, horóscopos, contarte sobre sus vidas pasadas y puedes hacerle algunas preguntas predefinidas. Actualmente, la app está en desarrollo y se lanzará en el otoño. Toebeans es una app multiplataforma de Compose que se orienta a Android y a iOS. En el caso de Android, usa la detección de objetos de MediaPipe para detectar las patas de los gatos, ya sea consumiendo el feed de la cámara o desde una imagen seleccionada.

Una vez que tenemos una foto de la pata (patas), el usuario puede obtener diferentes predicciones para su gato. En Android, usa VertexAI y Gemini para generar la respuesta de la instrucción de predicción determinada. En iOS, usa Firebase Functions para llamar a la API de Gemini. Esto se hace porque, actualmente, el paquete de VertexAI para iOS está escrito en Swift y no es compatible con Kotlin multiplataforma. Toebeans también usa Firebase Remote Config para poder ajustar los parámetros de la instrucción y la configuración del modelo de forma remota. Además de Firebase Auth para la autenticación de usuarios (actualmente inhabilitada).

El usuario también puede "modificar" su respuesta de adivinanza original a un tipo diferente. Luego, la app toma la respuesta original y le dice a Gemini que la reescriba con un estilo diferente.

El plan para el futuro es usar GenKit en lugar de VertexAI y las funciones de Firebase. También estamos en proceso de ajustar un modelo de Gemini con AI Studio.