OpusClip достигает 30% экономии средств с Gemini Flash

API Gemini позволяет разработчикам раскрыть весь потенциал мультимодального ИИ, предоставляя простой доступ к новейшим моделям Gemini. OpusClip , инновационная платформа для создания видеоконтента, является ярким примером этой преобразующей возможности. Они используют передовые возможности Gemini в области визуальных, аудио- и текстовых данных, чтобы кардинально изменить подход авторов и компаний к созданию увлекательного видеоконтента, демонстрируя практические преимущества передового ИИ в реальных приложениях.

Миссия OpusClip — предоставить возможность каждому создавать видеоконтент без профессиональных навыков с помощью платформы автоматического видеомонтажа для создания аутентичных и персонализированных видеороликов. База пользователей OpusClip превышает 7 миллионов человек, включая создателей контента, маркетологов, представителей бизнеса и крупные медиакомпании. Платформа использует искусственный интеллект для автоматического извлечения ключевых моментов из видео, кадрирования клипов для различных соотношений сторон и добавления анимированных субтитров и B-Roll, создавая захватывающий контент, готовый к публикации в социальных сетях.

Краеугольным камнем инноваций OpusClip является функция «ClipAnything» – мультимодальный инструмент ИИ для создания клипов. Эта функция позволяет пользователям создавать клипы, просто описывая моменты, которые они хотят запечатлеть, используя подсказки на естественном языке. Мультимодальные возможности Gemini 1.5 Flash играют здесь решающую роль, позволяя ИИ понимать и интерпретировать эти подсказки, анализируя визуальные эффекты, действия, эмоции, звук и диалоги в видео. «Мы используем Gemini 1.5 Flash для создания подробных визуальных описаний, которые помогают нам лучше понимать видео», – объясняет Вито Чжу, главный научный сотрудник OpusClip. Благодаря такому глубокому пониманию OpusClip определяет наиболее релевантные и интересные моменты на основе пользовательских подсказок, что значительно сокращает время и усилия, необходимые для монтажа видео.

Интеграция Gemini 1.5 Flash значительно повысила эффективность и производительность OpusClip. Платформа получила 30%-ную экономию затрат на обработку визуальных описаний при сохранении темпов экспорта. Более того, функция ClipAnything, связанная с подсказками, продемонстрировала 30%-ный рост вовлечённости пользователей (кликов) и 10%-ный рост темпов экспорта, что свидетельствует о повышенной точности и релевантности, обеспечиваемых Gemini 1.5 Flash.

«Gemini 1.5 Flash оптимизировал нашу разработку, ускорив вывод на рынок функций, основанных на подсказках, и обеспечив высокоточные результаты», — отмечает Вито. Хорошо документированный Gemini API SDK и надежная поддержка ещё больше улучшили процесс разработки.

OpusClip планирует и дальше совершенствовать и расширять функции, связанные с подсказками, исследуя расширенные возможности настройки для пользователей. Компания также рада возможности реализовать более персонализированные рекомендации, используя возможности Gemini 1.5 Flash для динамической адаптации видеоконтента к интересам каждого пользователя.