ASD Desteği

Ne işe yarar?

Uygulama, kullanıcıların otizmli bireylere yönelik bir Uygulamalı Davranış Terapisi oturumundaymış gibi Gemini ile sohbet etmesine olanak tanır. Bu sayede kullanıcılar sosyal becerilerini geliştirebilir ve tekrarlanan/zararlı davranışlar açısından izlenebilir. Konuşma konuları ve sergilenen davranışlar, daha sonra kişinin tedavi planlarına rehberlik etmesi için arkadaşlar, aile veya terapistler tarafından incelenmek üzere saklanır. Terapi seansları pahalı ve sık yapılmadığı için bu uygulama, zor durumdaki ailelerin otizmli aile üyelerini desteklemesine yardımcı olabilir.
Sohbet biçimi, Gemini'nin hem görsel hem de işitsel verileri değerlendirmedeki benzersiz özelliği sayesinde elde edilir. Sohbet sırasında resim çerçeveleri ve ses dosyaları Gemini API'ye yüklenir. Gemini, kareleri ve sesi birlikte değerlendirir. Böylece, kişinin yüz ifadeleri, ses tonundaki değişiklikler, telaffuz ve diğer fiziksel ve işitsel hareketlerini değerlendirip bunlara yanıt verebilir. Örneğin, Gemini zararlı bir davranışı (kendine vurma) ve bu davranışın kaç kare boyunca gerçekleştiğini not alabilir. Zaman içinde ilerleme, bir davranışın ne kadar azaldığını (davranış daha az karede [zaman] gerçekleşerek ölçülür) ölçerek değerlendirilebilir.
Firebase'da sohbet transkriptleri ve not edilen davranışlar her oturum için saklanır. İsteğe bağlı olarak, oturum verileri ebeveynler veya terapistler için özetlemek üzere Gemini'ye sağlanabilir. Bu, kullanıcıların etkinliklerinin, kendilerine daha iyi yardımcı olmak için bu bilgileri kullanabilecek diğer kullanıcıların dikkatine sunulmasına yardımcı olur.