EyeHear

Mit Gemini eine neue Ära der inklusiven Sicherheit für das Zuhause einläuten

Funktion

EyeHear verwendet die Gemini API, um Türklingeln für sehbehinderte Menschen barrierefrei zu machen. Gemini generiert detaillierte Textbeschreibungen von Türklingelvideos mithilfe von multimodalen Prompts. Diese Textbeschreibungen werden dann in Audio umgewandelt, das automatisch in einem Browser abgespielt wird. So können Nutzer „hören“, was an der Tür passiert, und Personen, Pakete oder andere Ereignisse identifizieren. Metadaten von Videobeschreibungen werden in Firebase für den Verlauf und mögliche Analysezwecke gespeichert.

Basis

  • Web/Chrome
  • Firebase

Team

Von

ThatOrJohn

Von

USA