SecondEye

کاری که انجام می دهد

SecondEye یک دستیار دیداری تعاملی و قابل آموزش است. می توان از آن برای انواع وظایف مرتبط با بینایی و موارد استفاده استفاده کرد. همچنین می توان به انجام وظایف بینایی شخصی بدون آموزش یا برنامه نویسی آموزش داد. همه به شیوه ای تعاملی و تکراری.
SecondEye در حال حاضر فقط با Gemini ساخته می شود، زیرا این مدل دارای قابلیت های منحصر به فرد است:
1. تشخیص اشیاء با قابلیت بازگرداندن موقعیت های جعبه مرزی دقیق
2. پشتیبانی ویدیویی بومی با قابلیت بازگرداندن اطلاعات مهر زمانی
3. پنجره زمینه بزرگ
SecondEye از این قابلیت ها برای ارائه این تجربیات منحصر به فرد و کاملا جدید هوش مصنوعی استفاده می کند:
• برای تصاویر (با استفاده از قابلیت شماره 1):
◦ تعاریف شیء مشروح
◦ پرسیدن در مورد بخش خاصی از یک تصویر
◦ تقویت:
▪ جستجوی شی
▪ نحوه تعمیر یا مونتاژ سوالات
▪ درخواست بازخورد بصری
◦ آموزش مدل در مورد یک قسمت حاشیه نویسی از یک تصویر
• برای ویدیو (با استفاده از قابلیت شماره 2):
◦ تجربه جستجوی ویدیویی پیشرفته
• برای فیلمبرداری زنده دوربین (با استفاده از قابلیت شماره 3):
◦ تجزیه و تحلیل ویدیوی زمان واقعی شخصی
◦ آموزش چیزی به مدل با فیلم
◦ کمک بصری در زمان واقعی برای افراد دارای اختلالات بینایی، با توانایی به خاطر سپردن چهره ها، اشیاء و مکان ها برای تشخیص آینده.
• برای اشتراک‌گذاری زنده صفحه (با استفاده از قابلیت شماره 3):
◦ آموزش مدل یک گردش کار
◦ پشتیبانی از فناوری اطلاعات یا برنامه نویسی.
◦ مرور وب و تجربه کلی رایانه را برای افراد دارای اختلالات بینایی افزایش دهید