Vismo

O que faz?

Nossa equipe desenvolveu um aplicativo Smart YouTube Video Assistant (Vismo) que permite que os usuários insiram um URL de vídeo do YouTube com uma solicitação ou consulta personalizada. Com base na intenção do comando, o sistema, usando a API Gemini, fornece uma resposta personalizada. Essa resposta pode ser em texto simples, texto com imagens relevantes, clipes de vídeo do vídeo especificado ou até mesmo uma resposta em vídeo.

O aplicativo começa extraindo as legendas e o título do vídeo. Com a ajuda da API Gemini, ele gera respostas de texto, classifica imagens e snippets de vídeo ou cria um script para um resumo de vídeo. O app usa carimbos de data/hora e legendas da transcrição para identificar e extrair com precisão imagens e segmentos de vídeo relevantes. Além disso, o aplicativo melhora a experiência do usuário oferecendo recomendações, como fontes da Web, imagens relacionadas e vídeos do YouTube. A API Gemini tem um papel crucial na geração das consultas de pesquisa que alimentam esses resultados e recomendações da Web.