Dukungan ASD

Fungsinya

Aplikasi ini memungkinkan pengguna untuk berkomunikasi dengan Gemini seolah-olah mereka sedang berada dalam sesi Terapi Perilaku Terapan untuk individu dengan autisme guna meningkatkan keterampilan sosial mereka dan dipantau untuk perilaku berulang/berbahaya. Topik percakapan dan perilaku yang ditampilkan disimpan untuk kemudian ditinjau oleh teman, keluarga, atau terapis guna memandu rencana pengobatan individu. Karena sesi terapi cenderung mahal dan jarang, aplikasi ini dapat membantu keluarga yang kesulitan mendukung anggota keluarga yang menderita autisme.
Format percakapan dicapai berkat kemampuan unik Gemini untuk mengevaluasi data visual dan audio. Selama percakapan, frame gambar dan file audio diupload ke Gemini API. Gemini mengevaluasi frame dan audio secara bersamaan, sehingga Gemini dapat mengevaluasi dan merespons tindakan fisik dan auditori individu seperti ekspresi wajah, infleksi vokal, pengucapan, dan lainnya. Misalnya, Gemini dapat mencatat perilaku berbahaya (memukul diri sendiri) dan juga berapa banyak frame yang terjadi. Seiring waktu, progres dapat dievaluasi berdasarkan seberapa banyak perilaku dikurangi, yang diukur dengan membuat perilaku terjadi dalam lebih sedikit frame (waktu).
Di Firebase, transkrip chat dan perilaku yang dicatat disimpan untuk setiap sesi. Jika diminta, data sesi dapat diberikan ke Gemini untuk diringkas bagi orang tua atau terapis. Hal ini membantu menarik perhatian orang lain yang dapat menggunakan informasi tersebut untuk membantu mereka dengan lebih baik.