Mad-Pic

Działanie

Ta aplikacja umożliwia użytkownikom robienie zdjęć zadań matematycznych lub notatek, aby znaleźć wyjaśnienia pojęć i powiązane pytania. Możesz wyszukać podobne zadania w bazie danych lub zrobić zdjęcie ręcznie napisanych notatek, a aplikacja znajdzie odpowiednie zadania matematyczne do ćwiczenia.

Aplikacja ma 3 tryby: skupiony na problemach, skupiony na wyjaśnieniach i połączony. Jeśli chcesz znaleźć podobne pytania, użyj trybu skupionego na problemie. Aby eksplorować pojęcia, zalecamy tryb skupiony na wyjaśnieniach. Nauczyciele preferowali tryb z wyjaśnieniami w testach.

Aby zaoszczędzić na kosztach, dodaliśmy opcję „Tylko tekst”, która pozwala pominąć interpretację obrazu w przypadku zadań bez obrazów. Aplikacja została stworzona na podstawie usługi, która przechowuje koreańskie zadania matematyczne za pomocą wektorowego embeddingu. Aplikacja automatycznie kategoryzuje i wektorówuje problemy z plików PDF. Obecnie przechowywanych jest około 15 tys. problemów.

Aplikacja używa wyszukiwania wektorów do znajdowania odpowiednich problemów, co wymaga interpretacji koncepcji i obrazu. Interfejs Gemini API służy do interpretacji pojęć i generowania wyjaśnień pasujących do podobnych wbudowanych modeli w bazie danych. Rozważaliśmy też analizę obrazu, ale okazało się, że jest to bardziej skomplikowane, niż się spodziewaliśmy. W przyszłości planujemy użyć interfejsu Gemini API do utworzenia bazy danych z zdjęciami, której zawartość będzie tworzona przez użytkowników. Podstawowy kod jest już gotowy.