MediAssist

Description

Inspiration:
La croissance rapide des industries a augmenté la pollution, ce qui a entraîné davantage de problèmes de santé. L'accès aux médecins étant limité, il est essentiel que les gens soient informés sur la santé. Notre application aide les utilisateurs à gérer leur santé en leur fournissant des informations médicales.
À propos du projet
:MediAssist a pour objectif de créer une application médicale pour aider les utilisateurs à gérer les problèmes de santé mineurs. Il propose trois fonctionnalités clés: l'identification des médicaments grâce à la reconnaissance d'image, un médecin IA optimisé par l'API Gemini de Google pour répondre aux questions de santé et un calendrier avec des rappels pour les tâches de santé. Comment avons-nous conçu notre projet ?
Nous avons étudié l'application de Gemini à la compréhension des images médicales et aux chatbots, et collecté des données médicales vietnamiennes à l'aide de bots et d'humains. Nous avons affiné le modèle et l'avons optimisé avec des invites Few-Shot.
Notre application de médecin IA utilise un chatbot basé sur Python avec l'IA générative de Google pour le réglage du modèle et les API RESTful. Le modèle Gemini 1.0 Pro traite les entrées du front-end React Native. Pour identifier les médicaments, les images sont converties en base64 et analysées par le modèle Gemini 1.5 Pro. Les noms des médicaments sont mis en correspondance dans notre base de données, et les résultats sont renvoyés au front-end. La fonctionnalité "Créer un agenda" permet aux utilisateurs de définir des rappels pour les médicaments, avec des notifications gérées via des services backend conteneurisés Docker. Tous les composants sont créés avec React Native et intégrés aux notifications push.