فهم الرموز المميّزة وعدّها


يعالج Gemini ونماذج الذكاء الاصطناعي التوليدي الأخرى المدخلات والمخرجات بدقة متناهية تُعرف باسم الرمز المميّز.

لمحة عن الرموز المميزة

يمكن أن تكون الرموز عبارة عن أحرف مفردة مثل z أو كلمات كاملة مثل cat. يتم تقسيم الكلمات الطويلة إلى عدة وحدات ترميز. تُعرف مجموعة جميع الرموز المميّزة التي يستخدمها النموذج باسم المفردات، وتُعرف عملية تقسيم النص إلى رموز مميّزة باسم الترميز.

بالنسبة إلى نماذج Gemini، يساوي الرمز المميّز 4 أحرف تقريبًا. تساوي 100 رمز تمييز حوالي 60 إلى 80 كلمة باللغة الإنجليزية.

عند تفعيل الفوترة، يتم تحديد تكلفة طلب البيانات من واجهة برمجة التطبيقات Gemini API جزئيًا حسب عدد الرموز المميّزة للدخل والخرج، لذا من المفيد معرفة كيفية احتساب الرموز المميّزة.