共有

2024 年 11 月 20 日

OpusClip は Gemini Flash で 30% の費用削減を実現

Vito Zhu

OpusClip

Vishal Dharmadhikari

プロダクト ソリューション エンジニア

OpusClip のショーケースのヒーロー画像

Gemini API を使用すると、最新の Gemini モデルに簡単にアクセスできるため、デベロッパーはマルチモーダル AI の可能性を最大限に引き出すことができます。OpusClip は、この変革的な能力の好例となる革新的な動画コンテンツ作成プラットフォームです。Gemini の視覚、音声、テキストデータの高度な理解を活用して、クリエイターや企業が魅力的な動画コンテンツを生成する方法に革命を起こし、最先端の AI の実用的なメリットを実世界のアプリケーションで実証しています。

OpusClip の内部: Gemini 1.5 Flash で「ClipAnything」のロックを解除する

OpusClip の使命は、本物でパーソナライズされた動画を作成するための自動動画編集プラットフォームを通じて、誰もが専門的なスキルなしで動画コンテンツを作成できるようにすることです。クリエイター、マーケター、企業、大手メディア企業など、700 万人を超えるユーザーベースを持つ同社のプラットフォームは、AI を活用して動画からハイライトを自動的に抽出します。さまざまなアスペクト比に合わせてクリップをリフレーミングし、アニメーション キャプションや B ロールで補強することで、ソーシャル メディアで共有できる魅力的なコンテンツを作成します。

OpusClip は Gemini 1.5 Flash を使用して、ユーザーが自然言語で短いクリップを簡単に生成できるようにします。

OpusClip のイノベーションの要は、マルチモーダル AI クリッピング ツールである ClipAnything 機能です。この機能を使用すると、ユーザーは自然言語プロンプトを使用してキャプチャしたい瞬間を説明するだけで、クリップを生成できます。Gemini 1.5 Flash のマルチモーダル機能がここで重要な役割を果たします。AI は、動画内の映像、アクション、感情、音声、会話を分析することで、これらのプロンプトを理解して解釈できます。OpusClip のチーフ リサーチ サイエンティストである Vito Zhu 氏は、「Gemini 1.5 Flash を活用して、動画の理解を深めるための詳細な視覚的説明を提供しています」と述べています。この深い理解により、OpusClip はユーザーのプロンプトに基づいて最も関連性の高い魅力的な瞬間を特定し、動画編集に必要な時間と労力を大幅に削減できます。

Gemini 1.5 Flash でコストを削減し、エンゲージメントを向上させる

Gemini 1.5 Flash の統合により、OpusClip の効率と効果が大幅に向上しました。プラットフォームでは、エクスポート率を維持しながら、視覚的な説明の処理コストが 30% 削減されました。また、プロンプト関連の「ClipAnything」機能では、ユーザー エンゲージメント(クリック数)が 30% 増加し、エクスポート率が 10% 増加しました。これは、Gemini 1.5 Flash によって精度と関連性が向上したことを示しています。

「Gemini 1.5 Flash により開発が効率化され、プロンプトベースの機能の市場投入までの時間が短縮され、非常に正確な結果が得られました」と Vito 氏は述べています。明確に文書化された Gemini API SDK と信頼性の高いサポートにより、開発エクスペリエンスがさらに向上しました。

OpusClip は、プロンプト関連の機能をさらに改良、拡張し、ユーザー向けの高度なカスタマイズ オプションを検討する予定です。また、Gemini 1.5 Flash の機能を活用して、個々のユーザーの興味に合わせて動画コンテンツを動的に調整することで、よりパーソナライズされたおすすめを実装できることにも期待しています。

Gemini API の概要: OpusClip の取り組みから得られた知見

ビジュアル コンテンツ分析やモーメント取得を含むプロジェクトを構築するデベロッパーに対する Vito の推奨事項は、Gemini API を使用して構築し、ユースケースに最適なモデルを見つけることです。「私たちにとって、Gemini 1.5 Flash の精度と速度のパフォーマンスは他のソリューションをはるかに上回っており、適切な設定を行えば費用対効果も優れています。」Gemini 1.5 Flash はプロンプトの調整に非常に敏感であるため、開発者は早期にモニタリングを設定し、データセットに基づいてプロンプトを微調整することをおすすめします。
Gemini API を使用した構築を開始するには、デベロッパー向けドキュメントをご覧ください。