Mad-Pic

機能

このアプリでは、ユーザーが数学の問題やメモを撮影して、概念の説明や関連する質問を見つけることができます。データベースで類似の問題を検索したり、手書きのメモの写真を撮影したりすると、アプリが関連する数学の問題を見つけて演習できます。

アプリには、問題重視モード、説明重視モード、組み合わせモードの 3 つのモードがあります。類似の質問を見つけるには、問題解決モードを使用します。コンセプトを探索する場合は、説明重視モードをおすすめします。教師はテストで説明重視のモードを好んでいました。

費用を節約するため、「テキストのみ」オプションを追加し、画像のない問題では画像の解釈を省略しました。このアプリは、ベクトル エンベディングを使用して韓国の数学の問題を保存するサービス上に構築されています。このアプリは、PDF ファイルの問題を自動的に分類し、ベクトル化します。現在、約 15,000 の問題が保存されています。

このアプリはベクトル検索を使用して関連する問題を見つけます。そのため、コンセプトと画像の解釈が必要です。Gemini API はコンセプトの解釈に使用され、データベース内の類似エンベディングに一致する説明を生成します。画像分析も検討しましたが、予想よりも複雑であることがわかりました。今後は、Gemini API を使用して写真を含むユーザー主導型のデータベースを作成することを計画しており、その基本コードはすでに準備されています。