فهم الرموز المميّزة وعدّها


تعمل نماذج Gemini وغيرها من نماذج الذكاء الاصطناعي التوليدي على معالجة المدخلات والمخرجات بدقة. تسمى الرمز المميز.

يشرح هذا الدليل كيفية الحصول على النوافذ السياقية لنماذج محددة، بالإضافة إلى كيفية عدد الرموز المميّزة لحالات الاستخدام، مثل إدخال النص والمحادثة والوسائط المتعددة الوسائط والإدخال وتعليمات النظام وأدواته.

لمحة عن الرموز المميّزة

يمكن أن تتألف الرموز المميّزة من أحرف فردية مثل z أو كلمات كاملة مثل cat. كلمات طويلة يتم تقسيمها إلى عدة رموز مميزة. مجموعة كل الرموز المميزة التي يستخدمها النموذج هي المفردات، وعملية تقسيم النص إلى رموز مميزة إنشاء الرموز المميّزة.

في نماذج Gemini، يعادل الرمز المميّز 4 أحرف تقريبًا. 100 رمز مميّز يساوي حوالي 60-80 كلمة إنجليزية.

عندما تكون الفوترة مفعَّلة، تكون تكلفة الاتصال بواجهة Gemini API هي محددة جزئيًا من خلال عدد رموز المدخلات والمخرجات، لذا فإن معرفة كيفية عدد الرموز المميزة يمكن أن تكون مفيدة.