无障碍地球
每个人都可以通过 Google 地球旅行并丰富自己的知识。
作用
此 Google 地球扩展程序利用 Gemini API 提供 AI 引导的虚拟世界旅行体验。主要功能包括:
AI 助理对话:
Gemini API 支持用户与 AI 助理之间的实时对话。通过包含情境和位置数据,该 API 可针对用户询问生成相关回答。
语音界面:
集成了语音转文字和文字转语音功能,可实现免触摸操作,从而提升用户沉浸感。
感知位置的功能:
Google 地球中的实时位置数据会发送到 Gemini API,让 AI 能够提供特定于位置的信息和感知情境的对话。
智能移动:
Gemini API 会分析用户对位置更改的请求。它使用 Google 地图 Geocoding API 获取坐标,并相应地更新 Google 地球显示内容。
图片识别:
捕获 Google 地球显示内容,并使用 Gemini API 的图片识别功能提供详细的位置信息,以便通过视觉情境丰富 AI 的说明。
个性化体验:
将用户偏好设置和对话记录发送到 Gemini API,以生成个性化回答和建议。
教育内容:
利用 Gemini API 生成有关所到地点的实时教育内容,涵盖历史、文化和地理。
多模态处理:
通过 Gemini API 集成各种输入模式(文本、语音、图片),打造全面的对话体验。
可采用以下设备打造
- Web/Chrome
团队
更新者
MasaoNishimoto
发件人
日本