Dreamy: Yapay Zeka Peri Masalları

Ne işe yarar?

Çocuklara yönelik video masalları oluşturmak için Google'ın en yeni yapay zeka modelini (Gemini) kullanan bir sistem geliştirdim. Yapay zeka modeli, hikaye ve resim istemlerini oluşturur. Bu istemler daha sonra Hugging Face'ta Google TPU Research Cloud tarafından desteklenen Mini DALL-E'ye iletilir. Arka uç, Python 3, FastAPI ve Uvicorn ile oluşturulmuştur. Resimler oluşturulduktan sonra, hikayenin metni, video uzunluğuna uygun bir WAV /MP3 dosyası oluşturmak için Contabo tarafından barındırılan bir makineye yüklenen/coqui-ai/TTS tarafından işlenir. Tüm öğeler MoviePy kullanılarak birleştirilir ve kullanıcıya döndürülür. Kullanıcılar, bir veya daha fazla karakter istemi kabul eden ve oluşturulan videoları statik dosyalar olarak depolayan bir POST uç noktası üzerinden etkileşim kurar. Arka planda çalışan bir iş, hata durumunda veya videolar 30 günden eskiyse yer açar. React Native ile oluşturulan ön uç, video oynatıcı içeren basit bir kullanıcı arayüzüne, ana sayfada rastgele oluşturma düğmesine ve oluşturma sayfasında iki karaktere kadar veya listeden önceden seçilmiş bir karakteri destekleyen özel oluşturma seçeneğine sahiptir. Çocukların veya gözetmenlerin kullanması için tasarlanan uygulama şu anda test aşamasındadır ve yakında Play Store'da kullanıma sunulması beklenmektedir.