שיתוף

11 בדצמבר 2024

יצירת סרטונים מחדש באמצעות Gemini 2.0 Flash

וישאל דהרמהדיקארי (Vishal Dharmadhikari)

מהנדס פתרונות למוצרים

האנג צ'ו

Viggle

תמונה ראשית (Hero) של Viggle showcase

Gemini API לא רק משפר אפליקציות, הוא מעורר מהפכה בביטוי היצירתי. Viggle, אפליקציית הווידאו הוויראלית שמבוססת על AI ומאפשרת לכל אחד להפוך תמונות לאנימציות מרתקות, היא אחת מהחלוצות של המהפכה הזו. אנחנו ב-Viggle מתנסים בקסם המולטי-מודאלי של Gemini 2.0 Flash, שזמין כרגע בתצוגה מקדימה ניסיונית בלבד – ובמיוחד ביכולת המתקדמת שלו להבין סרטונים וליצור פלט אודיו, לצד יצירת תמונות על ידי Imagen 3. בעזרת הניסויים האלה אנחנו מפתחים תכונות שיאפשרו למשתמשים להפוך את הפנטזיות הכי פרועות שלהם למציאות בקלות, בדרכים שלא היו אפשריות בעבר.

Inside Viggle: Powering AI Video Creation with Gemini 2.0 Flash and Imagen 3

אפליקציית Viggle כבר משכה מיליוני משתמשים בזכות היכולת שלה להפוך בקלות תמונות סטטיות לסרטונים מונפשים עם תנועה של כל הגוף, וכך לעורר תוכן ויראלי בפלטפורמות של רשתות חברתיות. Viggle מתמקדת בתוכן של ממים וריקודים, ומציעה אפליקציות לנייד (iOS ו-Android) ופלטפורמת אינטרנט (viggle.ai). תכונות כמו החלפת פנים, אנימציה של תמונות עם תנועות ריקוד והוספת משתמשים לסצנות בסרטים כבר פופולריות בקרב בסיס המשתמשים של Viggle, ועכשיו הם בודקים דרכים חדשות להעלות את רמת היצירתיות לשלב הבא.

צוות Viggle יוצר עכשיו אב טיפוס של שתי תכונות שמנצלות את העוצמה של Gemini 2.0 Flash ו-Imagen 3:


  • תמונות לדמות וירטואליות בסרטונים: חברת Viggle משתמשת ב-Imagen 3 ליצירת תמונות כדי ליצור כלי ליצירת דמויות מבוסס-AI. המשתמשים יכולים לספק הנחיות טקסט פשוטות – "רובוט רוקד עם עיניים זוהרות" או "דרקון רך בצבעי הקשת" – והמודל ייצור דמויות וירטואליות ייחודיות שיהיו מוכנות לככב בסרטונים שלהם. לאחר מכן, הדמויות האלה משולבות בצורה חלקה במנוע האנימציה של Viggle, ופותחות עולם של אפשרויות ליצירת סיפורים מותאמים אישית. איך זה מרגיש לביים סרט אנימציה קצר משלכם עם דמויות שנוצרו לגמרי מהדמיון שלכם? זה הכוח ש-Viggle ו-Imagen 3 מעניקים לכם.

  • קריינות דינמית מבוססת-AI: Viggle משתמשת גם ביכולת של Gemini 2.0 Flash ליצור דיבור וביכולת ההבנה העמוקה שלו לגבי סרטונים, כדי לפתח תכונה שמוסיפה קריינות עשירה בהקשר לכל סרטון. זה לא רק קול מונוטוני שקורא תסריט, אלא כלי סיפורים מבוסס-AI שמנתח את תוכן הסרטון – מזהה רגעים משמעותיים, פעולות ואפילו רגשות – כדי ליצור קריינות שמתאימה בצורה מושלמת לתוכן החזותי. בין אם מדובר בפרשנות הומוריסטית לסרטון ריקוד או בתיאור אפי של סצנת פנטזיה, הקריינות של ה-AI מוסיפה מימד חדש לגמרי של התעניינות.

מגיעים לרמות חדשות של יצירתיות והתעניינות

השילוב של AI גנרטיבי ישפר את חוויית השימוש ב-Viggle בכמה דרכים עיקריות:


  • יצירת דמויות פשוטה יותר: יצירת התמונות של Imagen 3 מאפשרת לייעל את תהליך היצירה וההתאמה האישית של דמויות בסרטונים. עכשיו משתמשים יכולים ליצור דמויות ייחודיות על סמך הרעיונות שלהם, בלי צורך ביכולות עיצוב מתקדמות או בהסתמך על אפשרויות מוגדרות מראש מוגבלות. תהליך העבודה המפושט הזה מאפשר ליותר משתמשים להפוך את החזון היצירתי שלהם למציאות.

  • תוכן מותאם אישית יותר: Gemini 2.0 Flash מאפשר למשתמשים ליצור סיפורים מותאמים אישית מאוד בסרטונים. דמויות בהתאמה אישית בשילוב עם קריינות דינמית מבוססת-AI מאפשרות לספר סיפורים ייחודיים שמחזקים את הקשר בין היוצרים לקהל שלהם.

  • אפשרויות קריאייטיב מורחבות: השילוב של דמויות וירטואליות ותיאורים על ידי AI מרחיב את הפוטנציאל היצירתי של סרטונים קצרים ב-Viggle. המשתמשים יכולים לנסות דרכים חדשות לספר סיפורים, מעבר לפורמטים הרגילים של סרטונים.

מבט קדימה

אנחנו ב-Viggle שמחים להמשיך ולחקור את הפוטנציאל של Gemini 2.0 ושל מודלים ליצירת תמונות כדי לשפר את הפלטפורמה שלנו. אנחנו רואים עתיד שבו AI ישתלב בצורה חלקה בכל שלב בתהליך הקריאייטיב, ויאפשר לכל אחד ליצור סרטונים.

"ב-Viggle, כולם יוצרים. אנחנו יוצרים ממים, בודקים טכנולוגיות של צילום תנועה לפרויקטים ברמה הבאה ובונים את המולטי-יקום שלנו. אנחנו מאמינים שהיכולות של Gemini 2.0 Flash לקריינות קול מציאותית יאפשרו למשתמשים שלנו לממש פוטנציאל חדש – ליצור סיפורים בדרכים חדשות לגמרי".

– האנג צ'ו (Hang Chu), מייסד Viggle

העבודה של Viggle עם Gemini 2.0 Flash ו-Imagen 3 מדגימה את הפוטנציאל של AI לשנות את יצירת הסרטונים ולספק למשתמשים כלים חדשים לביטוי עצמי. שיתוף הפעולה הזה הוא צעד נוסף לעבר העתיד של סיפורים מבוססי-AI. מידע נוסף על פיתוח באמצעות Gemini זמין במסמכי התיעוד של Gemini API. בנוסף, אפשר לקרוא מידע נוסף על Imagen 3 כדי לקבל מידע על השיפורים האחרונים ביצירת תמונות.