NimMini

การทำงาน

เมื่อตอนเด็กๆ ฉันก็เคยพบเจอปัญหาที่คล้ายกันนี้เนื่องจากอ่านหนังสือหรือแสดงออกไม่ได้ การที่พ่อแม่ของฉันใช้ภาษามือไม่ได้ทำให้ฉันรู้สึกว่าการสื่อสารระหว่างที่เติบโตขึ้นมานั้นเป็นเรื่องยากมาก
แอป Android ใช้เทคโนโลยีเฟรมเวิร์ก UI หลักของ Google อย่าง Jetpack Compose พร้อมด้วยภาษา Kotlin ที่รวมกับโมเดล Gemma เพื่อให้ได้บทสนทนาแบบอินเทอร์แอกทีฟที่ชาญฉลาด
วิธีการแสดงออกด้วยรูปภาพนี้ ซึ่งรวมถึงความช่วยเหลือสำหรับเด็กหูหนวก ยังเป็นเครื่องมือการสื่อสารที่ใช้งานง่ายสำหรับเด็กออทิสติกและชุมชนคนหูหนวกด้วย ผู้ใช้ไม่จำเป็นต้องป้อนข้อความด้วยตนเอง เพียงคลิกรูปภาพเพื่อสร้างบทสนทนาโดยอัตโนมัติ ซึ่งจะลดความซับซ้อนของกระบวนการสื่อสารและช่วยให้แสดงออกได้ง่ายขึ้น
การเข้าถึงความรู้และข้อมูลมักถูกจำกัดอยู่พอสมควร โดยเฉพาะเมื่อพบวัตถุหรือแนวคิดที่ไม่คุ้นเคย อย่างไรก็ตาม การถ่ายภาพและอัปโหลดรูปภาพช่วยให้ผู้ใช้ใช้ประโยชน์จากเทคโนโลยีการจดจำรูปภาพขั้นสูงเพื่อระบุชื่อและข้อมูลที่เกี่ยวข้องของสิ่งเหล่านี้ได้ ซึ่งช่วยให้เรียนรู้และเข้าใจสภาพแวดล้อมรอบตัวได้อย่างรวดเร็ว
เราพิจารณาแล้วว่าในระหว่างการสื่อสารแบบเห็นหน้ากัน ภาษามือเป็นภาษาที่เข้าใจง่ายมากสำหรับการแสดงคำแต่ละคำ แต่กลับขาดความลื่นไหลเมื่อแสดงประโยคที่ยาวขึ้น ซึ่งจำเป็นต้องจัดระเบียบคำเป็นวลี การใช้เทคโนโลยี Gemma เพื่อจดจำคีย์เวิร์ดช่วยให้เราช่วยเหลือกลุ่มพิเศษในการจัดระเบียบความคิด ทำให้พวกเขาแสดงออกได้อย่างราบรื่นมากขึ้น