Otwieranie inteligentnych okularów dla niewidomych/niedowidzących
Rozwiązanie open source wykorzystujące Gemini 1.5 Pro do kierowania użytkowników BLV
Działanie
## Omówienie projektu
W ramach tego projektu opracowujemy rozwiązanie typu open source na potrzeby inteligentnych okularów dla osób niewidomych i słabowidzących. Naszym celem jest stworzenie niedrogich, spersonalizowanych i dostępnych inteligentnych okularów z ramką wydrukowaną w technologii 3D, standardowymi bateriami i układem Raspberry Pi. Ten projekt jest zgłoszeniem do konkursu dla programistów Gemini API, który ma na celu zaprezentowanie potencjału AI w technologiach wspomagających.
## Zawartość repozytorium
- `Glasses v21.3mf`: plik modelu 3D dla projektu oprawek okularów
- `main.py`: główny skrypt aplikacji dla oprogramowania inteligentnych okularów BLV
## Funkcje
- Analiza i opis środowiska na podstawie dźwięku
- Interfejs poleceń głosowych z wykrywaniem słowa aktywującego
- Integracja z interfejsem Gemini API do zaawansowanego przetwarzania języka
- Okresowe generowanie dziennika podsumowującego ostatnie działania
- Wyjście tekst-mowa do wykorzystania w opiniach użytkowników
- Przygotowanie do przyszłych funkcji przetwarzania obrazu
- Niestandardowy projekt oprawek okularów do wydruku 3D
Utworzone za pomocą
- Oprogramowanie typu open source
Zespół
Autor:
Gizzai Smartwear (Honglin, Leoh, Yicun)
Od
Stany Zjednoczone