Otwieranie inteligentnych okularów dla niewidomych/niedowidzących

Rozwiązanie open source wykorzystujące Gemini 1.5 Pro do kierowania użytkowników BLV

Działanie

## Omówienie projektu

W ramach tego projektu opracowujemy rozwiązanie typu open source na potrzeby inteligentnych okularów dla osób niewidomych i słabowidzących. Naszym celem jest stworzenie niedrogich, spersonalizowanych i dostępnych inteligentnych okularów z ramką wydrukowaną w technologii 3D, standardowymi bateriami i układem Raspberry Pi. Ten projekt jest zgłoszeniem do konkursu dla programistów Gemini API, który ma na celu zaprezentowanie potencjału AI w technologiach wspomagających.

## Zawartość repozytorium

- `Glasses v21.3mf`: plik modelu 3D dla projektu oprawek okularów
- `main.py`: główny skrypt aplikacji dla oprogramowania inteligentnych okularów BLV

## Funkcje

- Analiza i opis środowiska na podstawie dźwięku
- Interfejs poleceń głosowych z wykrywaniem słowa aktywującego
- Integracja z interfejsem Gemini API do zaawansowanego przetwarzania języka
- Okresowe generowanie dziennika podsumowującego ostatnie działania
- Wyjście tekst-mowa do wykorzystania w opiniach użytkowników
- Przygotowanie do przyszłych funkcji przetwarzania obrazu
- Niestandardowy projekt oprawek okularów do wydruku 3D

Utworzone za pomocą

  • Oprogramowanie typu open source

Zespół

Autor:

Gizzai Smartwear (Honglin, Leoh, Yicun)

Od

Stany Zjednoczone