Тоебины

Что он делает

Toebeans — это забавное приложение для получения различных видов предсказаний для вашего питомца. Оно может генерировать показания лап, гороскопы, рассказывать вам о его прошлой жизни, и вы можете задавать ему некоторые предопределенные вопросы. Приложение в настоящее время находится в стадии разработки и, как планируется, будет выпущено осенью. Toebeans — это приложение Compose Multiplatform, которое предназначено как для Android, так и для iOS. На стороне Android оно использует обнаружение объектов MediaPipe для обнаружения кошачьих лап либо путем использования потока с камеры, либо с выбранного изображения.

Получив изображение лапы (toebeans), пользователь может получить различные предсказания для своего кота. На Android он использует VertexAI и Gemini для генерации ответа из заданного запроса на предсказание. На iOS он использует Firebase Functions для вызова API Gemini. Это делается потому, что в настоящее время пакет VertexAI для iOS написан на языке Swift и несовместим с Kotlin Multiplatform. Toebeans также использует Firebase Remote Config для возможности удаленной настройки параметров запроса и настроек модели. А также Firebase Auth для аутентификации пользователя (в настоящее время отключено).

Пользователь также может «изменить» свой первоначальный ответ на предсказание судьбы на другой тип. Затем приложение берет первоначальный ответ и просит Gemini переписать его в другом стиле.

План на будущее — использовать GenKit вместо функций VertexAI и Firebase. Мы также находимся в процессе настройки модели Gemini с использованием студии AI.