Project Stargate

Ne işe yarar?

Stargate yapay zeka projesi, otomatik değerlendirme sistemi (veya eğlenceli bir çizim/tahmin oyunu) için erken bir prototiptir. Stargate şu anda uzaktan görüntüleme oturumundaki monitörün rolünü simüle etmek için Gemini modelini kullanır. Uzaktan görüntüleme oturumundaki monitör, izleyiciye oturum boyunca rehberlik eder, izleyicinin sinyal çizgisinde kalmasını ve kendisine gelen görüntüleri daha ayrıntılı şekilde açıklamasını sağlar. Gemini, çok modlu avantajdan tam olarak yararlanmak için de kullanılır. Bu avantaj, genellikle uzaktan izleme oturumunda program izleyicilerinin oturumdan sonra analiz edeceği eskiz verilerine dahil edilir. Bu otomasyon, yapay zeka izleyiciye (Gemini) izleyicinin belirli bir zamanda neyi çizdiğini ve bu eskizlerin oturum boyunca toplanacak bir konumun veya nesnenin daha net bir resmiyle nasıl ilişkili olabileceğini görmesi için "gözler" verir. Uygulama, sohbette sağlanan ayrıntılara ve eskizlere dayalı olarak potansiyel uzaktan görüntüleme hedefinin canlı modellerini oluşturmak için Imagen 2 modelinin kullanımından da yararlanır (yani, benim kadar kötü çizen biri bile uzaktan görüntüleme oturumunun keyfini çıkarabilir). Bir Firestore Langchain Record Manager (PR is in) geliştirerek chatbot'a bir retrieval augmented generation sisteminin entegrasyonu için bazı ilk çalışmalar yapıldı. Bu kayıt yöneticisi, retrieval augmented generation gemini chatbot için belge yönetimi konusunda Firestore'dan tam olarak yararlanmamıza olanak tanıyacak. Depoda açıklanan gelecekteki çalışmalar