Gov Notes
O Gov Notes usa a IA do Gemini para aumentar o engajamento dos cidadãos com o governo
O que faz?
O Gov Notes é um site que permite que os usuários entendam rapidamente reuniões governamentais longas. Os usuários podem pesquisar comitês ou tópicos específicos, que os direcionam para a página de resumo da audiência. Nessa página, o usuário pode procurar pontos principais e clicar neles para assistir a parte do vídeo em que eles são discutidos. Além disso, essa página contém um chat com tecnologia do Gemini, em que o usuário pode fazer perguntas complementares sobre o vídeo para se aprofundar no assunto. Nesse chat, os usuários podem perguntar quando o assunto atual foi discutido e receber um link direto para o vídeo.
Do ponto de vista técnico, o Gov Notes analisa as transcrições de audiências governamentais usando as APIs generate_content e embed_content do Gemini, além de um banco de dados PgVector do Postgres para RAG. Durante o pré-processamento, cada ponto-chave gerado é validado usando o RAG para garantir que exista um trecho de 30 segundos da transcrição que sirva como "prova", descartando pontos-chave que falham na validação para evitar a disseminação de informações incorretas. O recurso de chat usa a "chamada de função" do Gemini e um processo de RAG semelhante para se conectar ao chat, processando todas as respostas para carimbos de data/hora diretos no vídeo em que o tópico atual do chat foi discutido. A pesquisa em todo o site é implementada usando uma pesquisa vetorial de similaridade semântica em uma combinação ponderada de todos os pontos principais e snippets de transcrição. A pesquisa eficiente em centenas de milhares de vetores é o resultado de um SQL cuidadosamente criado e de um índice HNSW sobre os vetores.
Desenvolvido com
- Web/Chrome
- Cloud Run do GCP
- Cloud SQL e Artifact Registry. API YouTube Data Modelo de embeddings de IA generativa do Google. Além disso, o site vids.google.com está na versão Beta para envio de vídeos.
Equipe
Por
Gov Notes / Jason Steving / Kenny Mayhue
De
Estados Unidos