שיתוף

‫11 בדצמבר 2024

חידושים ביצירת סרטונים עם Gemini 2.0 Flash

וישאל דהרמדיקארי (Vishal Dharmadhikari)

מהנדס פתרונות מוצר

Hang Chu

Viggle

תמונה ראשית (Hero) של Viggle

‫Gemini API לא רק משפר את האפליקציות, אלא גם מוביל למהפכה בביטוי היצירתי. Viggle, תוכנת ה-AI ליצירת סרטונים שהפכה ללהיט ויראלי, מאפשרת לכל אחד להפוך תמונות לאנימציות מרתקות, והיא בחזית המהפכה הזו. חברת Viggle מתנסה ביכולות המולטי-מודאליות של Gemini 2.0 Flash, שזמין כרגע רק בגרסת טרום-השקה ניסיונית. החברה נעזרת במיוחד ביכולות המתקדמות של המודל להבנת סרטונים וליצירת פלט אודיו, וגם ביכולות ליצירת תמונות של Imagen 3. כך היא יוצרת תכונות שיאפשרו למשתמשים להגשים את הדמיונות הכי פרועים שלהם בקלות, בדרכים שלא היו אפשריות עד היום.

‫Viggle: יצירת סרטוני AI באמצעות Gemini 2.0 Flash ו-Imagen 3

היכולת של Viggle להפוך תמונות סטטיות לסרטונים מונפשים עם תנועות של כל הגוף כבר משכה מיליוני משתמשים, והתוכן שנוצר בה הפך ויראלי בפלטפורמות של מדיה חברתית. האפליקציה מתמקדת בממים ובתכנים של ריקודים, והיא זמינה כאפליקציה לנייד (iOS ו-Android) וכפלטפורמת אינטרנט (viggle.ai). תכונות כמו החלפת פנים, אנימציה של תמונות עם תנועות ריקוד והוספת משתמשים לסצנות בסרטים כבר פופולריות בקרב בסיס המשתמשים של Viggle, ועכשיו הם בודקים דרכים חדשות להעביר את היצירתיות לרמה הבאה.

חברת Viggle יוצרת כרגע אב טיפוס של שתי תכונות שמבוססות על היכולות של Gemini 2.0 Flash ו-Imagen 3:


  • דמויות וירטואליות בסרטון מתוך תמונה: Viggle משתמשת ב-Imagen 3 ליצירת תמונות כדי ליצור כלי ליצירת דמויות מבוסס-AI. המשתמשים יכולים לספק הנחיות פשוטות בטקסט – "רובוט רוקד עם עיניים זוהרות" או "דרקון רך בצבעי הקשת" – והמודל ייצור דמויות וירטואליות ייחודיות שמוכנות להשתתף בסרטונים שלהם. הדמויות האלה משולבות בצורה חלקה במנוע האנימציה של Viggle, ופותחות עולם של אפשרויות לסיפורים בהתאמה אישית. תארו לעצמכם שאתם יכולים לביים סרט קצר עם אנימציה שבו מככבות דמויות שנוצרו לגמרי בדמיון שלכם – זאת היכולת ש-Viggle ו-Imagen 3 מעניקים לכם.

  • קריינות דינמית מבוססת-AI: Viggle גם נעזרת ביכולת של Gemini 2.0 Flash ליצור דיבור ובהבנה העמוקה של סרטונים, כדי לפתח תכונה שמוסיפה קריינות עשירה בהקשר לכל סרטון. זה לא סתם קול מונוטוני שקורא תסריט, אלא קריין AI שמנתח את תוכן הסרטון – מזהה רגעים משמעותיים, פעולות ואפילו רגשות – כדי ליצור קריינות שמשלימה בצורה מושלמת את התוכן החזותי. בין אם מדובר בפרשנות הומוריסטית לסרטון ריקוד או בתיאור אפי של סצנת פנטזיה, הקריין הווירטואלי מוסיף מימד חדש לגמרי של מעורבות.

הגעה לרמות חדשות של יצירתיות ומעורבות

השילוב של AI גנרטיבי צפוי לשפר את חוויית השימוש ב-Viggle בכמה דרכים חשובות:


  • יצירת דמויות פשוטה יותר: יצירת התמונות ב-Imagen 3 מייעלת את התהליך של יצירת דמויות בסרטונים והתאמה שלהן. עכשיו משתמשים יכולים ליצור דמויות ייחודיות על סמך הרעיונות שלהם, בלי צורך בכישורי עיצוב מתקדמים או בהסתמכות על אפשרויות מוגבלות שמוגדרות מראש. תהליך העבודה הפשוט הזה מאפשר ליותר משתמשים להגשים את החזון היצירתי שלהם.

  • תוכן מותאם אישית יותר: Gemini 2.0 Flash מאפשר למשתמשים ליצור תסריטים מותאמים אישית לסרטונים. דמויות שמעוצבות בהתאמה אישית, בשילוב עם קריינות דינמית של AI, מאפשרות ליצור סיפורים ייחודיים שמחזקים את הקשר בין היוצרים לקהל שלהם.

  • אפשרויות יצירתיות מורחבות: השילוב של דמויות וירטואליות וקריינות מבוססת-AI מרחיב את הפוטנציאל היצירתי של סרטונים קצרים ב-Viggle. המשתמשים יכולים לנסות סוגים חדשים של סיפורים, מעבר לפורמטים מסורתיים של סרטונים.

מבט קדימה

ב-Viggle מתרגשים להמשיך ולחקור את הפוטנציאל של Gemini 2.0 ומודלים ליצירת תמונות כדי לשפר את הפלטפורמה שלהם, ומדמיינים עתיד שבו AI משתלב בצורה חלקה בכל שלב בתהליך היצירתי, ומאפשר לכל אחד להפוך ליוצר סרטונים.

"ב-Viggle, כולם יוצרים. אנחנו יוצרים ממים, בודקים אפשרות ללכידת תנועה לפרויקטים ברמה הבאה ובונים מולטי-יקום משלנו. אנחנו מאמינים שהיכולות של Gemini 2.0 Flash ליצירת קריינות קוליות שנשמעות כמו קול אנושי יאפשרו למשתמשים שלנו לממש פוטנציאל חדש – ליצור סיפורים כמו שלא עשו קודם".

– האנג צ'ו (Hang Chu), מייסד Viggle

העבודה של Viggle עם Gemini 2.0 Flash ו-Imagen 3 מדגימה את הפוטנציאל של AI לשנות את יצירת הסרטונים ולספק למשתמשים כלים חדשים לביטוי עצמי. שיתוף הפעולה הזה הוא צעד לקראת עתיד של סיפורים שמבוססים על AI. כדי לקבל מידע נוסף על פיתוח באמצעות Gemini, אפשר לעיין בתיעוד של Gemini API ולקרוא על Imagen 3 כדי להכיר את החידושים האחרונים שלנו בתחום יצירת התמונות.