Jayu

Funktion

Jayu ist ein revolutionärer persönlicher Assistent, der die Funktionen von Gemini nahtlos in die Interaktion auf dem Display einbindet. Jayu geht über die Grenzen dessen hinaus, was ein LLM leisten sollte, und nutzt Gemini, um eine nutzerzentrierte Umgebung für alle zu schaffen – von technisch versierten Nutzern bis hin zu weniger technisch versierten Nutzern. Kein Docker-Container, keine komplexe Benutzeroberfläche und kein anderes LLM oder VLM außer Gemini. Für die Nutzerfreundlichkeit sind Funktionen für die Sprach- und Texterkennung sowie die Gestenerkennung integriert.

Jayu zeichnet sich durch seine einzigartige Fähigkeit aus, Prompts mit Ihrem Display als Kontext zu beantworten und mit Elementen auf dem Display zu interagieren. Jayu kann alles: Code anhand eines Diagramms schreiben, direkt mit Apps interagieren und Live-Übersetzungen vorlesen.

Als Steuerzentrale wird ein Flash-Modell verwendet. Nachdem das Modell eine Anweisung vom Nutzer erhalten hat, ruft es andere Gemini-Modelle über Funktionsaufrufe auf, um bei Bedarf bei der Aufgabe zu helfen. Durch Prompt-Engineering interagieren Flash-Modelle direkt mit Chrome und beantworten schnelle Fragen. Pro-Modelle sind hingegen darauf trainiert, die leistungsstarken visuellen Funktionen von Gemini zu nutzen, um App-Fenster zu analysieren. Dank der Objekterkennung von Gemini kann Jayu auf Schaltflächen klicken, die auf dem Bildschirm angezeigt werden.

Wir sind uns der Sicherheitsrisiken bewusst, die mit dem Zugriff auf Ihren Bildschirm oder Ihre Dateien verbunden sind. Jayu kann nicht auf Ordner oder Apps zugreifen, die ihm nicht angezeigt werden. Jayu sieht sich Ihren Bildschirm nur an, wenn Sie dazu aufgefordert werden. Außerdem speichert Jayu keine Daten oder Protokolle von Bildern oder Aufzeichnungen.