Jayu

Ne işe yarar?

Jayu, Gemini'nin özelliklerini ekran etkileşimiyle sorunsuz bir şekilde entegre eden devrim niteliğinde bir kişisel asistandır. LLM'nin yapabileceği şeylerin sınırlarını aşan Jayu, teknoloji meraklısı kullanıcılardan teknoloji konusunda zorluk yaşayanlara kadar herkese kullanıcı odaklı bir deneyim sunmak için Gemini'den yararlanıyor. Docker kapsayıcı, karmaşık arayüz ve Gemini dışında başka bir LLM veya VLM yoktur. Konuşma metne dönüştürme, metin okuma ve jest tanıma özellikleri, kullanılabilirlik için yerleşik olarak sunulur.

Jayu'nun gücü, istemleri bağlam olarak ekranınızı kullanarak yanıtlama ve ekrandaki öğelerle etkileşim kurma gibi benzersiz özelliklerinden gelir. Jayu, şemaya dayalı kod yazma, uygulamalarla doğrudan etkileşim kurma ve canlı çevirileri okuma gibi her şeyi yapabilir.

Komut merkezi olarak bir Flash modeli kullanılır. Kullanıcıdan talimat aldıktan sonra model, işlev çağrısını kullanarak gerekirse görevine yardımcı olması için diğer Gemini modellerini çağırır. Flash modeller, istem mühendisliği sayesinde doğrudan Chrome ile etkileşim kurar ve hızlı soruları yanıtlar. Pro modeller ise uygulama pencerelerini analiz etmek için Gemini'nin güçlü görüntüleme özelliklerini kullanmak üzere eğitilir. Gemini'nin nesne algılama özellikleri sayesinde Jayu, ekranda gördüğü düğmeleri tıklayabilir.

Ekranınıza veya dosyalarınıza erişmenin güvenlik risklerinin farkındayız. Jayu, kendisine gösterilmeyen klasörlere veya uygulamalara erişemez. Jayu yalnızca doğrudan istenirse ekranınıza bakar. Ayrıca, resim veya kayıtlarla ilgili herhangi bir bellek ya da günlük saklamaz.