MediAssist

기능

아이디어:
산업의 급속한 성장으로 오염이 증가하여 건강 문제가 더 많이 발생하고 있습니다. 의사에게 액세스할 수 있는 기회가 제한적이므로 사람들이 건강에 관한 정보를 얻는 것이 중요합니다. 이 앱은 사용자가 의료 정보를 제공하여 건강을 관리할 수 있도록 지원합니다.
프로젝트 정보:
MediAssist의 목표는 사용자가 경미한 건강 문제를 관리하는 데 도움이 되는 의료 앱을 만드는 것입니다. 이 앱은 이미지 인식을 통한 약물 식별, Google의 Gemini API를 기반으로 건강 관련 질문에 답변하는 AI 의사, 건강 관련 할 일 알림이 있는 캘린더 등 세 가지 주요 기능을 제공합니다. 프로젝트 구축 방법:
Gemini를 의학 이미지 이해 및 챗봇에 적용하는 방법을 연구하고 봇과 사람을 사용하여 베트남 의료 데이터를 수집했습니다. 모델을 미세 조정하고 샘플링 프롬프트로 최적화했습니다.
AI 의사 앱은 모델 조정 및 RESTful API에 Google 생성형 AI가 포함된 Python 기반 AI 챗봇을 사용합니다. Gemini 1.0 Pro 모델은 React Native 프런트엔드의 입력을 처리합니다. 약물 식별의 경우 이미지가 base64로 변환되고 Gemini 1.5 Pro 모델로 분석됩니다. 약물 이름이 데이터베이스에서 일치되고 결과가 프런트엔드로 다시 전송됩니다. Create Calendar 기능을 사용하면 사용자가 Docker 컨테이너화된 백엔드 서비스를 통해 관리되는 알림으로 약 복용 알림을 설정할 수 있습니다. 모든 구성요소는 React Native로 빌드되고 푸시 알림과 통합됩니다.