عداد الرموز (Tokens)

احسب الرموز (tokens) باستخدام ترميزات OpenAI. الصق النص واختر ترميزاً لترى عدد الرموز بجانب عدد الكلمات والأحرف، وكيف ينقسم النص إلى رموز. يجري العدّ داخل متصفحك.

نصك

الترميز

من النماذج التي تستخدم هذا الترميز في قائمة نماذج tiktoken: gpt-5, gpt-4.5-preview, gpt-4.1, gpt-4o, o1, o3, o4-mini.

الرموز في نصك

اكتب نصاً أو الصقه أعلاه لترى كيف ينقسم إلى رموز.

كل كتلة مظلّلة تمثل رمزاً واحداً. مرّر المؤشر فوق أي كتلة لترى معرّف رمزها. وقد تحمل الكتلة أكثر من معرّف عندما يتوزع حرف واحد، مثل بعض الرموز التعبيرية أو الحروف الصينية واليابانية والكورية، على عدة رموز.

عدد الرموز

الرموز

0

الترميز المستخدم: o200k_base

كلمات

0

أحرف

0

الرموز لكل كلمة

0.00

الأحرف لكل رمز

0.00

الكلمات لكل رمز

0.00

طريقة العدّ

تُحتسب الرموز باستخدام js-tiktoken، وهي نقلٌ بلغة JavaScript لمكتبة tiktoken مفتوحة المصدر من OpenAI، وفق الترميز الذي تختاره. والعدد الناتج يخص النص نفسه فقط؛ فقد يُظهر طلب API بضعة رموز إضافية، لأن رسائل المحادثة تتضمن رموز تنسيق، ولأن الصور والملفات وتعريفات الأدوات تُحتسب على حدة. والأحرف هنا أحرف Unicode، فيُحتسب الرمز التعبيري حرفاً واحداً.

Claude وGemini

يستخدم Claude من Anthropic وGemini من Google أدوات ترميز خاصة بهما، لذا لا تنطبق الأرقام هنا إلا على ترميزات OpenAI. ويوثّق كلا المزوّدَين طريقة حساب الرموز في نماذجه؛ والقاعدة التقريبية التي تذكرها Google لنماذج Gemini هي نحو 4 أحرف لكل رمز، أو 60 إلى 80 كلمة إنجليزية لكل 100 رمز. أما Anthropic فلا تذكر نسبة كهذه، وتصف عدّها للرموز بأنه تقديري.

أيّ ترميز تختار

o200k_base

الترميز الذي تخصصه مكتبة tiktoken لنماذج GPT-4o وGPT-4.1 وGPT-4.5 وGPT-5 ولنماذج الاستدلال o1 وo3 وo4-mini. استخدمه مع نماذج المحادثة الحالية من OpenAI.

cl100k_base

الترميز الذي تخصصه مكتبة tiktoken لنماذج GPT-4 وGPT-3.5 Turbo ولنماذج التضمين text-embedding-3 وada-002. استخدمه مع نماذج المحادثة الأقدم هذه ومع نماذج التضمين.

مزوّدون آخرون

لكلٍّ من Claude وGemini وLlama وغيرها من عائلات النماذج أداة ترميز خاصة بها، ويعطي النص نفسه عدداً مختلفاً في كل منها، لذا استخدم العداد الذي يوفّره المزوّد نفسه لتلك النماذج.

ضمن نافذة السياق

تحقق من أن الموجّه أو المستند أو التفريغ النصي الطويل يتسع ضمن نافذة سياق النموذج قبل إرساله، مع ترك مساحة للرد.

تقدير تكلفة API

اضرب عدد الرموز في سعر الرمز الواحد من صفحة أسعار المزوّد لتقدير تكلفة الطلب بوصفه مدخلات.

مقارنة النصوص والترميزات

اعرف كيف تغيّر الأرقام والروابط والشيفرات البرمجية واللغات الأخرى عدد الرموز لكل كلمة، وقارن بين الترميز الأقدم cl100k_base والترميز o200k_base على النص نفسه.

المصادر

آخر مراجعة للحدود بالاستناد إلى هذه المصادر: 2026-10-19.

أدوات أخرى

أدوات ذات صلة

احسب الكلمات والأحرف، أو تحقق من سهولة قراءة المسودة، أو حوّل عدد الكلمات إلى صفحات.

الأسئلة الشائعة عن عداد الرموز

ما الرمز (token)؟

الرمز وحدة نصية يقرؤها النموذج اللغوي: غالباً كلمة شائعة كاملة مع المسافة التي تسبقها، وأحياناً جزء من كلمة أطول أو علامة ترقيم أو جزء من رمز تعبيري. والقاعدة التقريبية لدى OpenAI أن الرمز الواحد يعادل نحو أربعة أحرف، أو ثلاثة أرباع كلمة، من النص الإنجليزي.

أيّ ترميز أختار؟

اختر o200k_base لـ GPT-4o ونماذج OpenAI الأحدث، بما فيها GPT-4.1 وGPT-5 وسلسلة o. واختر cl100k_base لـ GPT-4 وGPT-3.5 Turbo ونماذج التضمين من OpenAI. يأتي هذا الربط من قائمة النماذج في مكتبة tiktoken من OpenAI.

هل العدد دقيق؟

بالنسبة إلى النص نفسه، يطابق العدد نتيجة tiktoken لأنه يستخدم ملفات الترميز نفسها. أما الاستهلاك الذي تُظهره API للطلب فقد يكون أعلى قليلاً، لأن رسائل المحادثة تضيف رموز تنسيق، ولأن الصور والملفات وتعريفات الأدوات تُحتسب على حدة.

هل يصلح هذا لـ Claude أو Gemini؟

لا. يستخدم Claude وGemini أدوات ترميز خاصة بهما، فلا يصلح عدد OpenAI مؤشراً موثوقاً لهما. وتوفّر كلٌّ من Anthropic وGoogle طريقة لحساب الرموز في نماذجها، وتجد الروابط في لوحة النتائج.

لماذا تستهلك بعض النصوص رموزاً أكثر لكل كلمة؟

تُبنى أدوات الترميز بحيث تكون الكلمة الإنجليزية الشائعة رمزاً واحداً. أما الكلمات النادرة والأرقام والتواريخ والروابط والشيفرات البرمجية وكثير من اللغات غير الإنجليزية، ومنها العربية، فتُقسَّم إلى أجزاء أكثر، لذا قد يستهلك العدد نفسه من الكلمات رموزاً أكثر بشكل ملحوظ.

هل يُرسل نصي إلى أي مكان؟

لا. يُنزَّل ملف الترميز إلى متصفحك في أول مرة تحسب فيها، ويجري العدّ على جهازك، ولا يُرفع نصك.