Teilen

20. November 2024

OpusClip erzielt mit Gemini Flash Kosteneinsparungen von 30 %

Vito Zhu

OpusClip

Vishal Dharmadhikari

Product Solutions Engineer

OpusClip-Vorlage – Hero

Mit der Gemini API können Entwickler das volle Potenzial multimodaler KI nutzen, da sie einfachen Zugriff auf die neuesten Gemini-Modelle haben. OpusClip, eine innovative Plattform zur Erstellung von Videoinhalten, ist ein Paradebeispiel für diese transformative Fähigkeit. Sie nutzen die erweiterten Möglichkeiten von Gemini für visuelle, Audio- und Textdaten, um die Art und Weise zu revolutionieren, wie Creator und Unternehmen ansprechende Videoinhalte erstellen. So werden die praktischen Vorteile moderner KI in der Praxis veranschaulicht.

Inside OpusClip: „ClipAnything“ mit Gemini 1.5 Flash freischalten

OpusClip möchte es allen ermöglichen, ohne professionelle Kenntnisse Videoinhalte zu erstellen. Dazu bietet das Unternehmen eine Plattform für die automatische Videobearbeitung, mit der authentische und personalisierte Videos erstellt werden können. Die Plattform hat über 7 Millionen Nutzer, darunter Creator, Werbetreibende, Unternehmen und große Medienunternehmen. Mithilfe von KI werden Highlights aus Videos automatisch extrahiert, Clips für verschiedene Seitenverhältnisse neu zugeschnitten und mit animierten Untertiteln und B-Roll-Aufnahmen angereichert. So entstehen ansprechende Inhalte, die in sozialen Medien geteilt werden können.

OpusClip verwendet Gemini 1.5 Flash, damit Nutzer ganz einfach Kurzclips in natürlicher Sprache erstellen können.

Ein Eckpfeiler der Innovation von OpusClip ist die Funktion ClipAnything, ein multimodales KI-Clipping-Tool. Mit dieser Funktion können Nutzer Clips erstellen, indem sie die Momente, die sie festhalten möchten, einfach in natürlicher Sprache beschreiben. Die multimodalen Funktionen von Gemini 1.5 Flash spielen dabei eine entscheidende Rolle. So kann die KI diese Prompts verstehen und interpretieren, indem sie Bilder, Handlungen, Emotionen, Audioinhalte und Dialoge im Video analysiert. „Wir verwenden Gemini 1.5 Flash, um detaillierte visuelle Beschreibungen bereitzustellen und so unser Verständnis von Videos zu verbessern“, erklärt Vito Zhu, Chief Research Scientist bei OpusClip. Dank dieses tiefen Verständnisses kann OpusClip anhand von Nutzerprompts die relevantesten und ansprechendsten Momente identifizieren. So wird der Zeit- und Arbeitsaufwand für die Videobearbeitung drastisch reduziert.

Niedrigere Kosten und mehr Interaktionen mit Gemini 1.5 Flash

Durch die Integration von Gemini 1.5 Flash konnten die Effizienz und Effektivität von OpusClip deutlich verbessert werden. Die Plattform konnte bei der Verarbeitung visueller Beschreibungen 30% der Kosten einsparen und gleichzeitig die Exportrate beibehalten. Außerdem konnte mit der Prompt-bezogenen Funktion „ClipAnything“ das Nutzer-Engagement (Klicks) um 30% und die Exportraten um 10% gesteigert werden. Das zeigt, wie genau und relevant Gemini 1.5 Flash ist.

„Gemini 1.5 Flash hat unsere Entwicklung optimiert, was die Markteinführungszeit für promptbasierte Funktionen verkürzt und äußerst präzise Ergebnisse ermöglicht hat“, erklärt Vito. Das gut dokumentierte Gemini API SDK und der zuverlässige Support haben die Entwicklung weiter optimiert.

OpusClip plant, die promptbezogenen Funktionen weiter zu optimieren und zu erweitern und erweiterte Anpassungsoptionen für Nutzer zu entwickeln. Außerdem freut sich das Team darauf, personalisiertere Empfehlungen zu implementieren, indem es die Funktionen von Gemini 1.5 Flash nutzt, um Videoinhalte dynamisch an die individuellen Interessen der Nutzer anzupassen.

Erste Schritte mit der Gemini API: Erkenntnisse aus der Erfahrung von OpusClip

Vito empfiehlt Entwicklern, die Projekte mit der Analyse visueller Inhalte oder dem Abrufen von Momenten erstellen, die Gemini API zu verwenden und das richtige Modell für ihren Anwendungsfall zu finden. „Gemini 1.5 Flash übertrifft andere Lösungen bei der Genauigkeit und Geschwindigkeit bei weitem. Bei der richtigen Einrichtung ist es auch kostengünstig.“ Er rät Entwicklern, frühzeitig ein Monitoring einzurichten und Prompts anhand ihrer Datensätze zu optimieren, da Gemini 1.5 Flash sehr reaktionsschnell auf Promptanpassungen reagiert.
Wenn Sie mit der Gemini API entwickeln möchten, lesen Sie die Entwicklerdokumentation.