فريق دعم ASD

وظيفتها

يسمح التطبيق للمستخدمين بمحادثة Gemini كما لو كانوا في جلسة علاج سلوكي تطبيقي للأفراد المصابين بالتوحد لتحسين مهاراتهم الاجتماعية ومراقبة السلوكيات المتكررة أو الضارة. يتم تخزين مواضيع المحادثات والسلوكيات المعروضة لمراجعتها لاحقًا من قِبل الأصدقاء أو أفراد العائلة أو المعالجين من أجل توجيه خطط العلاج للفرد. وبما أنّ جلسات العلاج غالبًا ما تكون باهظة الثمن وغير متكررة، يمكن أن يساعد هذا التطبيق العائلات المتعذّرة في دعم أفراد العائلة المصابين بالتوحد.
يتم تحقيق تنسيق المحادثة بفضل قدرة Gemini الفريدة على تقييم كلّ من البيانات المرئية والمسموعة. أثناء المحادثة، يتم تحميل إطارات الصور والملفات الصوتية إلى Gemini API. يُقيّم Gemini اللقطات والصوت معًا، ما يتيح له تقييم الإجراءات الجسدية والسمعية للفرد والاستجابة لها، مثل تعبيرات الوجه والنبر الصوتي والنطق وغير ذلك. على سبيل المثال، يمكن أن يلاحظ Gemini سلوكًا ضارًا (مثل ضرب الذات) وعدد اللقطات التي حدث فيها ذلك السلوك. بمرور الوقت، يمكن تقييم مستوى التقدّم من خلال مقدار انخفاض السلوك، ويتم قياس ذلك من خلال حدوث السلوك على مدار عدد أقل من اللقطات (الوقت).
في Firebase، يتم تخزين نصوص المحادثات والسلوكيات المُلاحظة لكل جلسة. يمكن تقديم بيانات الجلسة إلى Gemini لتلخيصها لعرضها على الوالدَين أو المعالجين عند الطلب. يساعد ذلك في لفت انتباه الآخرين إلى أنشطة الأفراد الذين يمكنهم استخدام المعلومات لمساعدتهم بشكل أفضل.