MediAssist

作用

灵感：
各行业的快速发展加剧了污染，导致更多健康问题。由于人们很难就医，因此了解健康知识至关重要。我们的应用通过提供医疗信息来帮助用户管理健康。
关于该项目：
MediAssist 的目标是打造一款医疗应用，帮助用户管理小问题。该应用提供三项主要功能：通过图片识别药品、由 Google 的 Gemini API 提供支持的 AI 医生来解答健康问题，以及包含健康任务提醒的日历。项目构建方式：
我们研究了如何将 Gemini 应用于医学图像理解和聊天机器人，并使用聊天机器人和人工工作人员收集了越南语医学数据。我们对该模型进行了微调，并使用少样本问题优化了该模型。
我们的 AI 医生应用使用基于 Python 的 AI 聊天机器人与 Google 生成式 AI 搭配使用，以实现模型调优和 RESTful API。Gemini 1.0 Pro 模型会处理来自 React Native 前端的输入。对于药品识别，系统会将图片转换为 base64 格式，并由 Gemini 1.5 Pro 模型进行分析。系统会在数据库中匹配药品名称，并将结果发送回前端。借助“创建日历”功能，用户可以为药物设置提醒，并通过 Docker 容器化后端服务管理通知。所有组件均使用 React Native 构建，并与推送通知集成。