Tekstet shkollore janë gjithçka që ju nevojitet (TAAYN-chan)

Çfarë bën

Tekstet shkollore janë gjithçka që ju nevojitet (Meet Taayn-chan) është një aplikacion inovativ i teksteve shkollore interaktiv i përmirësuar me ARCore që revolucionarizon mësimin duke sjellë në jetë përmbajtjen edukative. Aplikacioni kombinon realitetin e shtuar, Gemini API dhe teknologjinë e avancuar të zërit për të krijuar një mjedis mësimor gjithëpërfshirës, ​​të personalizuar dhe me humor.
Në thelbin e tij, aplikacioni përmban Taayn-chan, një avatar AR që shërben si një mësues dhe udhëzues miqësor, inteligjent. Ky avatar shfaqet në hapësirën fizike të përdoruesit përmes kamerës së pajisjes së tyre, duke krijuar një ndjenjë prezence dhe angazhimi. Kur përdoruesit i bëjnë pyetje Taayn-chan në lidhje me përmbajtjen e tekstit shkollor, ai jep përgjigje të personalizuara me figura AR që dalin nga libri, duke e bërë përvojën e të mësuarit më tërheqëse dhe ndërvepruese.
Tipari kryesor i aplikacionit është integrimi i tij me Gemini API, i cili fuqizon aftësitë AI të Taayn-chan. Fjalimi në tekst kryhet lokalisht në pajisje duke përdorur whisper.cpp, ndërsa teksti në të folur ofrohet nga ElevenLabs API, duke siguruar biseda të qetë dhe të natyrshme.
Personaliteti dhe njohuritë e Taayn-chan bazohen në një memorie të kontekstit referues nga Binjakët që përmban udhëzimet e tij dhe përmbajtjen e teksteve shkollore. Kjo i lejon atij të mbajë sjellje të qëndrueshme dhe shpërndarje të saktë të informacionit.
Aktualisht një prototip, TAAYN përdor tekste shkollore dhe përmbajtje që janë ose me burim të hapur ose në domenin publik, të gjitha të përdorura me lejet e duhura.