Navigation aveugle

Description

J'ai créé une application qui aide les personnes ayant une déficience visuelle à se déplacer dans leur environnement. L'application dispose de trois modes principaux : le "mode Navigation" qui guide l'utilisateur sur son environnement, le "mode Assistant" qui l'aide à poser des questions spécifiques sur son environnement et enfin le "mode Lecture" qui l'aide à lire des éléments comme des livres ou des panneaux.
L'API Gemini AI a été utilisée dans trois fichiers du projet, et chaque fichier est attribué à chaque mode ci-dessus.
Ainsi, la caméra du téléphone mobile de l'utilisateur capture les images/frames en temps réel, puis les envoie à la zone de saisie Gemini. Gemini crée ensuite des requêtes en sortie, car chaque modèle est entraîné. Les requêtes de sortie sont ensuite affichées sur la superposition. Grâce à la synthèse vocale, les personnes non voyantes peuvent entendre cette voix et se déplacer facilement.