SmartAvatar

Çfarë bën

Aplikacioni ynë e transformon transmetimin e drejtpërdrejtë në një përvojë interaktive ku shikuesit mund të bëjnë pyetje përmes bisedës në YouTube dhe të marrin përgjigje në kohë reale nga një avatar i Ajnshtajnit i drejtuar nga AI. Aplikacioni përdor API-në Gemini për të përpunuar dhe gjeneruar përgjigje ndaj pyetjeve të audiencës. Kur merret një pyetje, ajo i dërgohet API-së Gemini për një përgjigje, ndërsa njëkohësisht konvertohet në audio nëpërmjet një shërbimi tekst-në-fjalë. Kjo audio më pas sinkronizohet me një avatar të Ajnshtajnit të aktivizuar me lipsync në Unity3D, duke krijuar iluzionin se Ajnshtajni po u flet drejtpërdrejt shikuesve. I gjithë procesi transmetohet drejtpërdrejt në YouTube, duke i lejuar shikuesit të shohin pyetjen, emrin dhe foton e tyre të shfaqur në ekran ndërsa Ajnshtajni përgjigjet. Për të siguruar funksionim të qetë, pyetjet janë në radhë dhe përpunohen në mënyrë sekuenciale, me pyetjet dhe përgjigjet të menaxhuara në mënyrë të rregullt. Integrimi i Gemini API është çelësi për të ofruar përgjigje të sakta dhe në kohë, duke e bërë përvojën dinamike dhe tërheqëse për përdoruesit.