Qen GUI

Çfarë bën

Ju dëshironi të përdorni një skedar specifik. Për një përdorues me shikim, thjesht klikoni për të hyrë në dosjen Documents dhe klikoni përsëri për të hapur skedarin. U krye.

Por, çka nëse keni shikim të dëmtuar? Ju do të përdorni një lexues të verbër, siç është VoiceOver i macOS. Kështu që ju hapni një dritare të menaxherit të skedarëve dhe VoiceOver përshkruan në detaje se çfarë është dhe çfarë mund të bëjë (sa herë që e përdorni!). Ju përdorni veprime komplekse të tastierës për të lundruar në shiritin anësor. Sa herë që ndërveproni me pajisjen tuaj, VoiceOver përsërit informacionin për elementin e fokusuar të ndërfaqes së përdoruesit. Më pas zbrisni listën e dosjeve, një nga një, me VoiceOver që shpall emrin e çdo dosjeje derisa të dëgjoni më në fund dosjen e duhur. Procesi përsëritet brenda dosjes derisa të gjeni skedarin tuaj të dëshiruar. A nuk ishte acaruese?

Një detyrë e qetë me dy klikime shndërrohet në një operacion të lodhshëm me dhjetëra veprime.

Po sikur të mund të kryeni të njëjtën detyrë thjesht duke udhëzuar: "Në dosjen Documents, hap dokumentin tim të vaksinimit"? Aplikacioni im, GUI Dog, e bën këtë.

Përdoruesi i jep GUI Dog udhëzime të sakta për një detyrë. GUI Dog i siguron Binjakëve detyrën për të arritur dhe një listë të elementeve të UI që mund të manipulojë. Binjakët më pas specifikon se çfarë veprimesh duhet të ndërmarrin dhe GUI Dog përdor sistemin e aksesueshmërisë macOS për t'i ekzekutuar ato. Së bashku, ata punojnë për të përfunduar detyrën.

GUI Dog synon të jetë "syri që sheh" për personat me shikim të dëmtuar, duke përdorur teknologjitë Large Language Model për të ndihmuar në ngritjen e njerëzve të pafavorizuar, duke përmirësuar ndërveprimet e tyre me botën dixhitale.