Accessible Earth

תיאור

התוסף הזה ל-Google Earth משתמש ב-Gemini API כדי להציע חוויית נסיעה בעולם וירטואלי בהדרכת AI. בין התכונות העיקריות:

AI Assistant Dialogue:
Gemini API מאפשר שיחות בזמן אמת בין משתמשים לבין העוזר האישי מבוסס-ה-AI. ה-API יוצר תשובות רלוונטיות לשאילתות של המשתמשים על ידי הכללת נתוני הקשר ומיקום.
ממשק קול:
המערכת משלבת יכולות של המרת דיבור לטקסט והמרת טקסט לדיבור כדי לאפשר הפעלה ללא ידיים, וכך לשפר את חוויית המשתמש.
פונקציונליות מבוססת-מיקום:
נתוני מיקום בזמן אמת מ-Google Earth נשלחים ל-Gemini API, ומאפשרים ל-AI לספק מידע ספציפי למיקום ולנהל שיחות מבוססות-הקשר.
תנועה חכמה:
Gemini API מנתח בקשות של משתמשים לשינוי מיקום. הוא משתמש ב-Google Maps Geocoding API כדי לקבל קואורדינטות ולעדכן את התצוגה של Google Earth בהתאם.
זיהוי תמונות:
המערכת מתעדת את התצוגות של Google Earth ומשתמשת בזיהוי התמונות של Gemini API כדי לספק מידע מפורט על המיקום, ולהעשיר את ההסברים של ה-AI בהקשר חזותי.
חוויה מותאמת אישית:
המערכת שולחת את העדפות המשתמש ואת היסטוריית השיחות אל Gemini API כדי ליצור תשובות והמלצות מותאמות אישית.
תוכן חינוכי:
המערכת משתמשת ב-Gemini API כדי ליצור תוכן חינוכי בזמן אמת על המקומות שבהם ביקרתם, שכולל היסטוריה, תרבות וגיאוגרפיה.
עיבוד רב-מודלי:
המערכת משלבת מצבי קלט שונים (טקסט, קול, תמונות) דרך Gemini API כדי לספק חוויית שיחה מקיפה.