Ouvrir les lunettes connectées pour les personnes aveugles ou malvoyantes

Une solution Open Source qui utilise Gemini 1.5 Pro pour guider les utilisateurs de BLV

Description

## Présentation du projet

Ce projet développe une solution Open Source pour les lunettes connectées pour les personnes aveugles et malvoyantes. Notre objectif est de créer des lunettes connectées abordables, personnalisables et accessibles à l'aide de montures imprimées en 3D, de batteries standards et d'un Raspberry Pi. Ce projet est une participation au concours pour les développeurs sur l'API Gemini, qui met en avant le potentiel de l'IA dans les technologies d'assistance.

## Contenu du dépôt

- "Glasses v21.3mf" : fichier de modèle 3D pour la conception de la monture de lunettes
- "main.py" : script d'application principal pour le logiciel de lunettes connectées BLV

## Fonctionnalités

- Analyse et description de l'environnement basée sur l'audio
- Interface de commande vocale avec détection du mot clé
- Intégration à l'API Gemini pour un traitement avancé du langage
- Génération périodique d'un journal récapitulant les activités récentes
- Sortie de synthèse vocale pour les commentaires des utilisateurs
- Préparation des futures fonctionnalités de traitement d'image
- Conception de monture de lunettes personnalisée imprimable en 3D

Conçu avec

  • Open Source Smartware

Équipe

Par

Gizzai Smartwear (Honglin, Leoh, Yicun)

De

États-Unis