Xplain AI

Funktion

Xplain AI ermöglicht Echtzeitunterhaltungen mit Dokumenten, Mediendateien und Websites. Wenn Nutzer Dokumente hochladen, wandelt eine Extraktionspipeline den Text mit dem Modell „embedding-001“ in Vektordarstellungen um. Diese Vektoren werden zusammen mit den Textbatches und Datei-URLs effizient gespeichert, wobei Firebase-Batches für große Dokumente verwendet werden. Nach der Vektorisierung werden Nutzer zu einer Chatseite weitergeleitet, auf der sie mit ihrem Dokument interagieren können. Nutzernachrichten werden eingebettet und über eine Kosinussimilarity-Suche in Firestore abgeglichen. Dabei wird der ähnlichste Text für von Gemini generierte Antworten abgerufen.

Mediendateien werden in einer Vorverarbeitungspipeline analysiert und in Text umgewandelt, der dann eingebettet wird. Diese Pipeline verwendet die File Manager API und Gemini für eine ausführliche Analyse. Auf der Chatseite können Nutzer über die Schaltfläche „Lerneinheit“ Chatnachrichten in das Format „Fragen und Antworten“ umwandeln. So können sie erste Chatnachrichten in Paare aus Fragen und Antworten umwandeln, um das Lernen zu verbessern. Ein Online-Editor erleichtert die Bearbeitung und das Herunterladen von Chatnachrichten, was für Rechercheure von Vorteil ist.

Die Gemini-Integration ist für Xplain AI von zentraler Bedeutung. Sie ermöglicht das Einbetten, Ähnlichkeitssuchen, die Analyse von Mediendateien und die Generierung von Fragen und Antworten, was für sofortige und präzise Antworten sorgt. Durch diese Integration können Nutzer in Echtzeit auf die relevantesten Informationen in ihren Dokumenten zugreifen und so ihre Recherche- und Lernerfahrungen verbessern.