Everies

Funktion

Mit der Everies App, die auf der Gemini-Technologie basiert, werden die Objekte in Ihrer Umgebung durch einzigartige, verspielte, interaktive Charaktere – „Everies“ – zum Leben erweckt. Richten Sie einfach die Kamera auf die Objekte in Ihrer Umgebung. Die Augen der einzelnen Personen werden dann auf den Objekten angezeigt.
Wenn Sie auf diese Augen tippen, wird ein Charakter mit einer bestimmten Persönlichkeit, einem bestimmten Aussehen, einem bestimmten Dialog und einer bestimmten Stimme generiert, die alle auf das jeweilige Objekt, die Umgebung und den Kontext zugeschnitten sind. Sie können auch auf ein beliebiges Objekt tippen und Everies-Charaktere generieren, auch wenn das Auge nicht angezeigt wird.
Jede Figur kann über Ihre Spracheingaben in einen kontinuierlichen Dialog treten, was die Interaktion verbessert. Sie können auch Ihre Lieblings-Everies und unvergesslichen Szenen speichern.

Die einzigartige Fähigkeit von Everies, alles in interaktive, verspielte Charaktere zu verwandeln, ist ein herausragendes Merkmal der LLM-Technologie, die die Nutzung vereinfacht und nutzerfreundlicher macht. Der Prozess wird von der Gemini API automatisiert. Die Objekterkennung wird von TensorFlow Lite und die Zeichengenerierung über JSON-Dateien unterstützt. Die Augenposition wird mit hoher Framerate anhand der Objekterkennung auf dem Gerät in Kombination mit AR bestimmt. ARCore verankert die Augen und Gesichter der Charaktere, während die Erkennung mit hoher Framerate und das multimodale LLM (Gemini) für schnelle Reaktionen und eine hohe Qualität sorgen.

Everies befindet sich derzeit in der Betaphase als Proof-of-Concept. Ziel ist eine offizielle Veröffentlichung mit zukünftigen Updates, einschließlich fortlaufender Unterhaltungen mit Lieblings-Everies und Videoaufzeichnungsfunktionen.