공유

2024년 11월 20일

OpusClip, Gemini Flash로 비용 30% 절감

비토 주

OpusClip

비샬 다르마디카리

제품 솔루션 엔지니어

OpusClip 쇼케이스 히어로

Gemini API를 사용하면 개발자가 최신 Gemini 모델에 쉽게 액세스하여 멀티모달 AI의 잠재력을 최대한 활용할 수 있습니다. 혁신적인 동영상 콘텐츠 제작 플랫폼인 OpusClip은 이러한 변혁적 기능의 대표적인 예입니다. 이러한 파트너는 Gemini의 시각적, 청각적, 텍스트 데이터에 대한 고급 이해를 활용하여 크리에이터와 비즈니스가 매력적인 동영상 콘텐츠를 생성하는 방식을 혁신하고, 실제 애플리케이션에서 최첨단 AI의 실용적인 이점을 입증하고 있습니다.

OpusClip 내부: Gemini 1.5 Flash로 'ClipAnything' 사용하기

OpusClip의 사명은 모든 사용자가 전문 기술 없이도 진정성 있고 맞춤설정된 동영상을 만들 수 있도록 자동 동영상 편집 플랫폼을 제공하는 것입니다. 크리에이터, 마케팅 담당자, 비즈니스, 대규모 미디어 회사를 포함하여 700만 명이 넘는 사용자를 보유한 이 플랫폼은 AI를 활용하여 동영상에서 하이라이트를 자동으로 추출하고, 다양한 가로세로 비율로 클립의 프레임을 다시 설정하며, 애니메이션 자막과 B-Roll로 클립을 보강하여 소셜 미디어에 공유할 수 있는 매력적인 콘텐츠를 만듭니다.

OpusClip은 Gemini 1.5 Flash를 사용하여 사용자가 자연어를 사용하여 짧은 클립을 쉽게 생성할 수 있도록 지원합니다.

OpusClip의 혁신의 핵심은 멀티모달 AI 클리핑 도구인 'ClipAnything' 기능입니다. 이 기능을 사용하면 사용자가 자연어 프롬프트를 사용하여 촬영하려는 순간을 설명하기만 하면 클립을 생성할 수 있습니다. 여기서 Gemini 1.5 Flash의 멀티모달 기능이 중요한 역할을 합니다. AI가 동영상 내의 시각적 요소, 액션, 감정, 오디오, 대화를 분석하여 이러한 프롬프트를 이해하고 해석할 수 있도록 지원합니다. OpusClip의 수석 연구 과학자인 비토 주는 'Gemini 1.5 Flash를 활용하여 동영상 이해를 향상하기 위한 자세한 시각적 설명을 제공합니다.'라고 설명합니다. OpusClip은 이러한 심층적인 이해를 바탕으로 사용자 프롬프트를 기반으로 가장 관련성 높고 흥미로운 순간을 파악하여 동영상 편집에 필요한 시간과 노력을 대폭 줄일 수 있습니다.

Gemini 1.5 Flash로 비용 절감 및 참여도 향상

Gemini 1.5 Flash를 통합하여 OpusClip의 효율성과 효과가 크게 개선되었습니다. 이 플랫폼은 내보내기 비율을 유지하면서 시각적 설명 처리 비용을 30% 절감했습니다. 또한 프롬프트 관련 'ClipAnything' 기능의 경우 사용자 참여도 (클릭수)가 30% 증가하고 내보내기 비율이 10% 증가하여 Gemini 1.5 Flash가 제공하는 향상된 정확성과 관련성을 입증했습니다.

"Gemini 1.5 Flash를 사용하면 개발이 간소화되어 프롬프트 기반 기능의 출시 속도가 빨라지고 매우 정확한 결과를 제공할 수 있었습니다."라고 Vito는 말합니다. 문서가 잘 작성된 Gemini API SDK와 안정적인 지원으로 개발 환경이 더욱 개선되었습니다.

OpusClip은 사용자를 위한 고급 맞춤설정 옵션을 모색하여 프롬프트 관련 기능을 더욱 세련되게 다듬고 확장할 계획입니다. 또한 Gemini 1.5 Flash의 기능을 활용하여 동영상 콘텐츠를 개별 사용자의 관심분야에 동적으로 맞춤설정하는 등 더욱 맞춤화된 추천을 구현할 수 있게 되어 기쁘다고 말했습니다.

Gemini API 시작하기: OpusClip 여정에서 얻은 통계

시각적 콘텐츠 분석 또는 순간 검색과 관련된 프로젝트를 빌드하는 개발자에게 Vito는 Gemini API로 빌드하고 사용 사례에 적합한 모델을 찾을 것을 권장합니다. “Gemini 1.5 Flash의 정확성과 속도는 다른 솔루션을 훨씬 능가하며, 올바르게 설정하면 비용 효율적입니다.” 그는 Gemini 1.5 Flash가 프롬프트 조정에 매우 민감하므로 개발자는 초기에 모니터링을 설정하고 데이터 세트를 기반으로 프롬프트를 미세 조정하는 것이 좋다고 조언합니다.
Gemini API로 빌드를 시작하려면 개발자 문서를 참고하세요.