MediAssist

機能

インスピレーション:
産業の急速な成長により汚染が増加し、健康問題が増加しています。医師へのアクセスが制限されているため、人々が健康に関する情報を入手することが重要です。このアプリは、医療情報を提供することでユーザーの健康管理をサポートします。
プロジェクトについて:
MediAssist の目標は、ユーザーが軽微な健康問題を管理できるようにする医療アプリを作成することです。主な機能は 3 つあります。画像認識による薬の識別、Google の Gemini API を搭載した AI 医師による健康に関する質問への回答、健康に関するタスクのリマインダーを含むカレンダーです。プロジェクトの構築方法:
Gemini を医療画像認識と chatbot に適用する方法について調査し、bot と人間のワーカーを使用してベトナムの医療データを収集しました。モデルを微調整し、少数ショット プロンプトを使用して最適化しました。
AI ドクター アプリは、モデル チューニングと RESTful API に Google 生成 AI を備えた Python ベースの AI チャットボットを使用しています。Gemini 1.0 Pro モデルは、React Native フロントエンドからの入力を処理します。薬の識別では、画像が base64 に変換され、Gemini 1.5 Pro モデルによって分析されます。薬の名前がデータベースで照合され、結果がフロントエンドに送り返されます。カレンダーの作成機能を使用すると、ユーザーは薬の服用リマインダーを設定できます。通知は Docker コンテナ化されたバックエンド サービスで管理されます。すべてのコンポーネントは React Native で構築され、プッシュ通知と統合されています。