OpusClip חוסכת 30% בעלויות באמצעות Gemini Flash

ממשק ה-API של Gemini מאפשר למפתחים לנצל את מלוא הפוטנציאל של AI רב-מודלי על ידי מתן גישה קלה למודלים העדכניים ביותר של Gemini. OpusClip, פלטפורמה חדשנית ליצירת תוכן וידאו, היא דוגמה מצוינת ליכולת הזו לשינוי. הם משתמשים בהבנה המתקדמת של Gemini בנתונים חזותיים, אודיו וטקסט כדי לחולל מהפכה בדרך שבה יוצרים ועסקים יוצרים תוכן וידאו מרתק, וממחישים את היתרונות המעשיים של AI מתקדם באפליקציות בעולם האמיתי.

המשימה של OpusClip היא לאפשר לכולם ליצור תוכן וידאו בלי כישורים מקצועיים, באמצעות פלטפורמה לאוטומציה של עריכת וידאו ליצירת סרטונים אותנטיים ומותאמים אישית. פלטפורמת החברה כוללת יותר מ-7 מיליון משתמשים, כולל יוצרים, משווקים, עסקים וחברות מדיה גדולות. הפלטפורמה משתמשת ב-AI כדי לחלץ באופן אוטומטי רגעים מיוחדים מסרטונים, לשנות את הפריים של קליפים ליחסי גובה-רוחב שונים ולהעשיר אותם בכתוביות מונפשות ובקטעי B-Roll, וכך ליצור תוכן מרתק שאפשר לשתף ברשתות החברתיות.

אחת מאבני היסוד של החדשנות ב-OpusClip היא התכונה 'ClipAnything' – כלי חיתוך מבוסס-AI רב-מודלי. התכונה הזו מאפשרת למשתמשים ליצור קליפים פשוט על ידי תיאור הרגעים שהם רוצים לתעד, באמצעות הנחיות בשפה טבעית. היכולות של Gemini 1.5 Flash לזיהוי רכיבים שונים בסרטון (Multimodal) משחקות תפקיד חשוב בתהליך הזה. הן מאפשרות ל-AI להבין ולפרש את ההנחיות האלה על ידי ניתוח רכיבים חזותיים, פעולות, רגשות, אודיו ודיאלוגים בסרטון. "אנחנו משתמשים ב-Gemini 1.5 Flash כדי לספק תיאורים חזותיים מפורטים לשיפור הבנת הסרטונים שלנו", מסביר ויטוס ג'ו (Vito Zhu), המדען הראשי ב-OpusClip. ההבנה העמוקה הזו מאפשרת ל-OpusClip לזהות את הרגעים הרלוונטיים והמעניינים ביותר על סמך הנחיות מהמשתמשים, וכך לצמצם באופן משמעותי את הזמן והמאמץ הנדרשים לעריכת הסרטון.

השילוב של Gemini 1.5 Flash שיפר באופן משמעותי את היעילות והאפקטיביות של OpusClip. הפלטפורמה חוסכת 30% בעלויות העיבוד של התיאורים החזותיים, בלי לפגוע בשיעור הייצוא. בנוסף, התכונה 'ClipAnything' שקשורה להנחיה רשמה עלייה של 30% במעורבות המשתמשים (קליקים) ועלייה של 10% בשיעורי הייצוא, דבר שממחיש את הדיוק והרלוונטיות המשופרים של Gemini 1.5 Flash.

"Gemini 1.5 Flash ייעל את תהליך הפיתוח שלנו, קיצר את זמן ההשקה של תכונות שמבוססות על הנחיות וסיפק תוצאות מדויקות מאוד", מציין Vito. Gemini API SDK עם המסמכים המפורטים והתמיכה האמינה שיפרו עוד יותר את חוויית הפיתוח שלהם.

הצוות של OpusClip מתכנן לשפר ולרחיב את התכונות שקשורות להנחיות, ולבחון אפשרויות מתקדמות של התאמה אישית למשתמשים. בנוסף, הם שמחים להטמיע המלצות מותאמות אישית יותר על ידי ניצול היכולות של Gemini 1.5 Flash להתאים דינמית את תוכן הסרטונים לתחומי העניין של כל משתמש.