Compagnon 1

Description

"Companion" est une extension Chrome conçue pour rendre le Web plus accessible et plus convivial, en particulier pour les personnes ayant une déficience visuelle, un handicap cognitif ou des barrières linguistiques. L'application exploite l'API Gemini pour simplifier le contenu Web complexe, le rendant plus digeste et plus facile à comprendre.

L'idée de Companion est d'accorder à Gemini un accès direct au contenu Web de votre onglet actuel, ce qui lui permet de fournir des réponses pertinentes au contenu exact que vous consultez actuellement. Actuellement, l'application est compatible avec une multimodalité de base avec Gemini, ce qui vous permet d'envoyer à Gemini une image et du texte, et de recevoir une réponse textuelle. Nous prévoyons d'étendre cette fonctionnalité pour traiter plusieurs images, vidéos et contenus audio, et de générer des images pour illustrer le contenu Web.

Une fonctionnalité qui illustre l'orientation de l'application est sa capacité à comprendre et à répondre aux commandes vocales en mode pointage. Dans ce mode, Gemini interprète les commandes vocales en fonction du contenu sélectionné par l'utilisateur, et fournit des réponses adaptées au contexte et en lien avec la conversation en cours.

Les utilisateurs peuvent également ajuster les réponses de Gemini en fonction de leurs préférences. Par exemple, vous pouvez demander à Gemini de simplifier les informations, de poser des questions complémentaires pour mieux comprendre ou de traduire le contenu dans les langues de votre choix. Cette extension vise non seulement à rendre le Web plus facile à parcourir, mais aussi à améliorer les expériences quotidiennes en supprimant les obstacles liés aux contenus numériques.