Companheiro 1

O que faz?

A "Companion" é uma extensão do Chrome projetada para tornar a Web mais acessível e fácil de usar, principalmente para pessoas com deficiência visual, cognitiva ou barreiras linguísticas. O app usa a API Gemini para simplificar conteúdo da Web complexo, facilitando a compreensão.

O objetivo principal do Companion é conceder ao Gemini acesso direto ao conteúdo da Web da sua guia atual, permitindo que ele forneça respostas relevantes para o conteúdo que você está visualizando. No momento, o app oferece suporte a uma multimodalidade básica com o Gemini, permitindo que você solicite uma imagem e um texto e receba uma resposta baseada em texto. Os planos futuros incluem expandir esse recurso para processar várias imagens, vídeos e áudios, além de gerar imagens para ajudar a ilustrar o conteúdo da Web.

Um recurso que exemplifica a direção do app é a capacidade de entender e responder a comandos de voz no modo de passar o cursor. Nesse modo, o Gemini interpreta comandos de voz em relação ao conteúdo selecionado pelo usuário, fornecendo respostas com base no contexto que se alinham à conversa em andamento.

Os usuários também podem ajustar as respostas do Gemini de acordo com as preferências. Por exemplo, você pode pedir para o Gemini simplificar informações, fazer perguntas complementares para entender melhor ou traduzir o conteúdo para os idiomas escolhidos. O objetivo dessa extensão é não apenas tornar a Web mais navegável, mas também melhorar as experiências diárias, removendo barreiras para o conteúdo digital.