חלונית הקישורים לאפליקציות אחרות 1

תיאור

Companion הוא תוסף ל-Chrome שמיועד לשפר את הנגישות והנוחות של האינטרנט, במיוחד עבור אנשים עם לקויות ראייה, לקויות קוגניטיביות או מחסומי שפה. האפליקציה משתמשת ב-Gemini API כדי לפשט תוכן אינטרנט מורכב, וכך להפוך אותו לקל יותר לעיכול ולהבנה.

הרעיון המרכזי של Companion הוא לתת ל-Gemini גישה ישירה לתוכן האינטרנט בכרטיסייה הנוכחית, כדי שהוא יוכל לספק תשובות רלוונטיות לתוכן המדויק שאתם צופים בו כרגע. בשלב הזה, האפליקציה תומכת ב-Gemini במצב בסיסי של מולטימודליות, שמאפשר לכם להציג ל-Gemini תמונה וטקסט ולקבל תשובה מבוססת-טקסט. בעתיד אנחנו מתכננים להרחיב את היכולת הזו כדי לעבד כמה תמונות, סרטונים ואודיו, וגם ליצור תמונות שיעזרו להמחיש תוכן באינטרנט.

תכונה שממחישה את הכיוון של האפליקציה היא היכולת שלה להבין פקודות קוליות ולהגיב להן במצב של שיוט. במצב הזה, Gemini מפרש פקודות קוליות בהתאם לתוכן שבחר המשתמש, ומספק תשובות בהתאם להקשר שתואמות לשיחה המתמשכת.

המשתמשים יכולים גם לשנות את התשובות של Gemini בהתאם להעדפות שלהם. לדוגמה, אתם יכולים לבקש מ-Gemini לפשט מידע, להציע שאלות המשך כדי להעמיק את ההבנה או לתרגם תוכן לשפות שבחרתם. מטרת התוסף הזה היא לא רק להקל על הניווט באינטרנט, אלא גם לשפר את החוויות היומיות על ידי הסרת חסמים לגישה לתוכן דיגיטלי.