احجز استشارتك

Token

التوكن

يُكتب أيضاً: Tokens, توكنز

التوكن له معنيان: وحدة النص الصغيرة التي تقرؤها نماذج الذكاء الاصطناعي وتُحسب بها التكلفة، ورمز الدخول الذي يثبت هويتك أمام خدمة.

معنى Token بالعربي: التوكن، ويُترجم إلى «الرمز» أو «الوحدة النصية». للكلمة معنيان شائعان في عالم المواقع: وحدة النص التي تقرؤها نماذج الذكاء الاصطناعي، ورمز الدخول الذي يثبت هويتك أمام خدمة.

Token in Arabic: التوكن (الرمز).

التوكن في الذكاء الاصطناعي

النموذج اللغوي لا يقرأ كلمات كاملة، بل يقسّم النص إلى قطع صغيرة: كلمة قصيرة، أو جزء من كلمة، أو علامة ترقيم. في الإنجليزية يساوي التوكن نحو ثلاثة أرباع كلمة في المتوسط، والنص العربي يستهلك عادةً توكنات أكثر للمعنى نفسه.

لماذا يهمّك عددها

خدمات النماذج تحاسب بعدد التوكنات الداخلة والخارجة، ونافذة السياق تُقاس بها أيضًا. طلب طويل مع مستند كبير يكلّف أكثر، وقد يتجاوز الحد المسموح.

التوكن في الحماية

هو سلسلة حروف عشوائية تصدرها الخدمة بعد التحقق من هويتك، وترسلها مع كل طلب بدل كلمة السر. منه توكن الجلسة، وتوكن الوصول في OAuth، وروابط الدخول السحرية. يُعامل معاملة كلمة السر: لا يُنشر ولا يوضع في كود عام.

مصطلحات مرتبطة: LLM، Context Window، API Key، Prompt

مقالات بتستخدم المصطلح