視覚障がい者/弱視者向けのスマートグラスを開く
Gemini 1.5 Pro を使用して BLV ユーザーをガイドするオープンソース ソリューション
機能
## プロジェクトの概要
このプロジェクトでは、盲人や低視力者(BLV)向けのスマートグラス向けのオープンソース ソリューションを開発します。3D プリンタで作成したフレーム、市販の電池、Raspberry Pi を使用して、手頃な価格でカスタマイズ可能なスマートグラスを開発することを目指しています。このプロジェクトは、支援技術における AI の可能性を示す Gemini API デベロッパー コンペティションへのエントリです。
## リポジトリの内容
- 「Glasses v21.3mf」: メガネのフレーム設計用の 3D モデル ファイル
- 「main.py」: BLV スマート グラス ソフトウェアのメイン アプリケーション スクリプト
## 機能
- 音声ベースの環境分析と説明
- ウェイクワード検出による音声コマンド インターフェース
- 高度な言語処理のための Gemini API との統合
- 最近のアクティビティをまとめた定期的な日記の生成
- ユーザー フィードバック用のテキスト読み上げ出力
- 将来の画像処理機能の基盤
- カスタム 3D プリント可能なメガネのフレーム設計
構成
- オープンソース スマートウェア
チーム
By
Gizzai Smartwear(Honglin、Leoh、Yicun)
差出人
米国