Pytho AI

O que faz?

Nosso aplicativo oferece às equipes de assistência humanitária e resposta a desastres a capacidade de fornecer ajuda essencial de forma rápida e eficaz onde ela é mais necessária. As equipes de resposta a emergências geralmente dependem de processos manuais tediosos para avaliar danos, coordenar recursos e comunicar informações vitais. Por exemplo, ao identificar as áreas mais atingidas por um incêndio florestal ou furacão, os socorristas passam muito tempo analisando imagens de drones e satélites para coordenar uma resposta.
Nosso aplicativo automatiza esses processos demorados para fornecer planos úteis às equipes de resposta a emergências. Usando fontes de dados multimodais e em tempo real, incluindo dados de mídias sociais e de streaming de sensores, o Pytho pode traçar uma rota de resgate segura para que as equipes cheguem às vítimas, recomendar áreas para priorizar os esforços de resgate e otimizar o uso de recursos para economizar tempo e materiais importantes.
Usamos a API Gemini para:
1) Criar nosso aplicativo voltado ao usuário baseado na nuvem.
2) Criar um gerenciador de fluxo de trabalho que possa extrair a declaração de trabalho de uma captura de vídeo. Semelhante ao ÉCLAIR (arXiv:2405.03710v1)
3) Para criar um conjunto de treinamento multimodal instrumentado para ajustar instruções de LLMs pequenos, como o Gemma-2-2b. Alguns dos casos de uso incluídos nos conjuntos de treinamento são:
- Entender mapas e documentos para criar produtos baseados em geolocalização.
- Extrair localização de imagens.
- Avaliar danos à infraestrutura em imagens e vídeos
- Gerar produtos e recomendações para socorristas