Nhóm hỗ trợ ASD

Ý nghĩa

Ứng dụng này cho phép người dùng trò chuyện với Gemini như thể họ đang tham gia một buổi Trị liệu hành vi ứng dụng dành cho những người mắc chứng tự kỷ để cải thiện kỹ năng xã hội và được theo dõi các hành vi lặp đi lặp lại/hại. Các chủ đề trò chuyện và hành vi được thể hiện sẽ được lưu trữ để sau đó bạn bè, gia đình hoặc bác sĩ trị liệu xem xét nhằm hướng dẫn kế hoạch điều trị của từng cá nhân. Vì các phiên trị liệu thường tốn kém và không thường xuyên, nên ứng dụng này có thể giúp những gia đình gặp khó khăn hỗ trợ các thành viên gia đình mắc chứng tự kỷ.
Hình thức trò chuyện được thực hiện nhờ khả năng độc đáo của Gemini trong việc đánh giá cả dữ liệu hình ảnh và âm thanh. Trong cuộc trò chuyện, các khung hình ảnh và tệp âm thanh sẽ được tải lên API Gemini. Gemini đánh giá các khung hình và âm thanh cùng nhau, cho phép Gemini đánh giá và phản hồi các hành động thể chất và thính giác của cá nhân, chẳng hạn như biểu cảm trên khuôn mặt, ngữ điệu giọng nói, cách phát âm, v.v. Ví dụ: Gemini có thể ghi lại một hành vi gây hại (tự đánh mình) và số khung hình mà hành vi đó xảy ra. Theo thời gian, bạn có thể đánh giá tiến trình bằng cách đo lường mức độ giảm của một hành vi, được tính bằng số khung hình (thời gian) mà hành vi đó xảy ra.
Trên Firebase, bản chép lời cuộc trò chuyện và hành vi được ghi nhận sẽ được lưu trữ cho mỗi phiên. Theo yêu cầu, bạn có thể cung cấp dữ liệu phiên cho Gemini để tóm tắt cho cha mẹ hoặc bác sĩ trị liệu. Điều này giúp những người khác chú ý đến hoạt động của cá nhân và có thể sử dụng thông tin đó để giúp họ tốt hơn.