TwilightNav
به افراد کم بینا کمک کنید تا در اینترنت حرکت کنند.
کاری که انجام می دهد
این برنامه از Gemini API برای بهبود تعامل کاربر از طریق دو عملکرد کلیدی استفاده می کند:
تجزیه و تحلیل محتوا و ساختار: Gemini API فرمت HTML یک صفحه وب را تجزیه و تحلیل می کند و آن را به یک ساختار درختی سلسله مراتبی تبدیل می کند. در این ساختار، هر گره یک عنصر محتوایی خاص را نشان میدهد که هم شامل توصیف آن عنصر و هم خلاصهای از عناصر فرزند آن است. این سازمان امکان پردازش کارآمد و درک محتوای صفحه وب را فراهم می کند.
شناسایی و پیمایش هدف: Gemini API همچنین نقش مهمی در درک دستورالعملهای کاربر دارد. این ورودی صوتی را برای تشخیص هدف کاربر پردازش می کند و گره هدف مربوطه را در ساختار درختی شناسایی می کند. API دستورات کاربر را به شش هدف دسته بندی می کند: پیمایش به یک وب سایت، خلاصه سازی، خواندن محتوا، جستجوی اطلاعات، کلیک کردن بر روی عناصر و پر کردن فرم ها.
با استفاده از این قابلیتها، این اپلیکیشن به کاربران امکان میدهد تا انواع مختلفی از وظایف مبتنی بر وب را از طریق دستورات صوتی و ژستها انجام دهند و تجربه مرور را در دسترستر و شهودیتر میکند.
ساخته شده با
- اندروید
تیم
توسط
TwilightNav
از
استرالیا