آواتار آهنگ Virtualismo 3D

کاری که انجام می دهد

برنامه ما از اطلاعات آهنگ هایی استفاده می کند که با استفاده از Google Gemini پردازش شده اند تا متن را استخراج کرده و آن را به پاراگراف ها جدا کند. هدف از این جداسازی تداعی احساسات احتمالی با هر پاراگراف و استفاده از آواتار سه بعدی برای همگام سازی ژست ها و انیمیشن های این آواتار با صدای آهنگ است.
پردازش آهنگ
استخراج متن: ما از Google Gemini برای پردازش آهنگ ها و استخراج متن کامل استفاده می کنیم. فایل های صوتی آهنگ ها که می تواند با فرمت WAV یا MP3 باشد در اپلیکیشن آپلود می شود. جداسازی پاراگراف: متن استخراج شده به پاراگراف های جداگانه تقسیم می شود.
تجزیه و تحلیل احساسات: هر پاراگراف برای شناسایی و مرتبط کردن احساسات احتمالی تجزیه و تحلیل می شود.
قرار گرفتن در معرض API
یک API در معرض دید قرار می گیرد تا داده های ذخیره شده توسط سایر برنامه ها مصرف شود. این API دسترسی به اطلاعات آهنگ، از جمله متن پاراگراف ها و احساسات مرتبط را فراهم می کند.
نمونه برنامه در جاوا اسکریپت
مصرف API: برنامه مثالی که در جاوا اسکریپت توسعه یافته است، API را برای بازیابی داده های آهنگ مصرف می کند.
پخش صدا: برنامه امکان پخش صدای آهنگ را فراهم می کند.
ارتباط با آواتار سه بعدی: احساسات ضبط شده برای هر پاراگراف آهنگ با یک آواتار سه بعدی متحرک مرتبط است.
بیان احساسات: آواتار سه بعدی می تواند احساسات را از طریق ژست ها و حالات چهره بیان کند و یک تجربه بصری را ارائه دهد که موسیقی را تکمیل می کند.