Virtualismo Song Avatar 3D

תיאור

האפליקציה שלנו משתמשת במידע משירים שעברו עיבוד באמצעות Google Gemini כדי לחלץ את הטקסט ולהפריד אותו לפסקה. המטרה של ההפרדה הזו היא לשייך רגשות אפשריים לכל פסקה, ולהשתמש באנימציה תלת-ממדית כדי לסנכרן את התנוחות והאנימציות של הדמות הזו עם האודיו של השיר.
עיבוד שירים
חילוץ טקסט: אנחנו משתמשים ב-Google Gemini כדי לעבד את השירים ולחלץ את הטקסט המלא. קובצי האודיו של השירים, שיכולים להיות בפורמט WAV או MP3, מועלים לאפליקציה. הפרדת פסקאות: הטקסט שחולץ מחולק לפסקאות נפרדות.
ניתוח סנטימנטים: כל פסקאה נבדקת כדי לזהות ולשייך סנטימנטים אפשריים.
חשיפת API
ממשק API נחשף כדי שאפשר יהיה להשתמש בנתונים השמורים באפליקציות אחרות. ה-API הזה מספק גישה למידע על השיר, כולל הטקסט של הפסקה והרגשות המשויכים.
אפליקציית דוגמה ב-JavaScript
שימוש ב-API: אפליקציית הדוגמה, שפותחה ב-JavaScript, משתמשת ב-API כדי לאחזר את נתוני השירים .
הפעלת אודיו: האפליקציה מאפשרת להפעיל את האודיו של השיר.
שיוך לאיור תלת-ממדי: הרגשות שתועדו בכל פסקה של השיר משויכים לאיור תלת-ממדי מונפש.
ביטוי של רגשות: האיור התלת-ממדי יכול לבטא את הרגשות באמצעות תנוחות ופנים, וכך לספק חוויה חזותית שמתאימה למוזיקה.