Видение Crafters

Что он делает

Цель:
Наше мобильное приложение расширяет возможности людей с нарушениями зрения, улучшая их понимание окружающей среды. Используя камеру устройства, приложение захватывает изображения или видео и обрабатывает их через API Gemini для создания описательного текста, который затем преобразуется в речь. Приложение также имеет элементы управления жестами для фото/видеосъемки и интегрирует обнаружение опасности для подачи сигнала тревоги в опасных ситуациях.

Интеграция Близнецов:
Gemini является неотъемлемой частью нашего приложения, предоставляя расширенные возможности обработки сцены в текст. Он преобразует визуальные данные из изображений и видео в точные, подробные текстовые описания. Gemini отлично распознает сложные сцены и выявляет потенциальные опасности, предоставляя пользователям точную и действенную обратную связь. Эта функциональность имеет решающее значение для создания доступного и информативного опыта, что делает Gemini необходимым как для текстовых описаний, так и для обнаружения опасностей. Кроме того, Gemini используется для создания заголовков для журналов взаимодействия.

Функции:
-Обработка сцен в текст с помощью Gemini.
- Преобразование текста в речь, преобразование речи в текст и управление жестами для обеспечения доступности.
-Обнаружение опасностей с помощью Gemini и оповещения.
-Журналы взаимодействия с заголовками, сгенерированными Gemini.

Конечные пользователи:
Предназначено для людей с нарушениями зрения и лиц, осуществляющих уход за ними.

Преимущества:
-Улучшение понимания окружающей обстановки с помощью звука.
-Повышенная безопасность благодаря оповещениям об опасностях.
-Повышенная независимость и легкий доступ к журналам.