القيمة الافتراضية 0.75 كلمة لكل توكن هي القاعدة التقريبية التي تذكرها OpenAI للنصوص الإنجليزية؛ وتحتاج اللغات الأخرى والأكواد عادةً إلى توكنات أكثر لكل كلمة.
تتعامل نماذج اللغة الكبيرة (LLMs) مثل GPT وClaude وGemini مع النصوص في صورة توكنات وليس كلمات. والتوكن هو جزء صغير من النص، وغالبًا ما يكون مقطعًا من كلمة بطول أربعة أحرف تقريبًا. تقدّر هذه الحاسبة عدد الكلمات التي يقابلها عدد معيّن من التوكنات، كما تحسب تكلفة هذه التوكنات بناءً على سعر النموذج لكل مليون (1M) توكن.
طريقة الاستخدام
أدخل عدد التوكنات، ونسبة الكلمات لكل توكن (القيمة 0.75 خيار افتراضي جيد للنصوص الإنجليزية)، والسعر الذي يفرضه مزوّد الخدمة عن كل مليون توكن إن أردت (اتركه فارغًا لحساب عدد الكلمات فقط). تعرض الأداة فورًا عدد الكلمات التقديري، والتكلفة بالدولار إذا أدخلت سعرًا.
تكلفة واجهة برمجة التطبيقات هي عدد التوكنات بالملايين مضروبًا في سعر كل مليون توكن.
شرح المعادلة
يعتمد تقدير الكلمات على المعادلة \( \text{الكلمات} \approx \text{التوكنات} \times 0.75 \)، وهي تعكس القاعدة التقريبية التي تذكرها OpenAI للإنجليزية: التوكن الواحد ≈ 4 أحرف ≈ 0.75 كلمة. أما التكلفة فتُحسب بالمعادلة \( (\text{التوكنات} \div 1{,}000{,}000) \times \text{سعر المليون توكن} \)، لأن معظم المزوّدين يعلنون أسعارهم لكل مليون توكن. عدّل النسبة عند التعامل مع لغات أخرى أو أكواد برمجية، إذ تستهلك عادةً عددًا أكبر من التوكنات لكل كلمة. وتجدر الإشارة إلى أن اللغة العربية تميل أيضًا إلى استهلاك توكنات أكثر من الإنجليزية، لذا قد ترغب في خفض النسبة عند تقدير النصوص العربية.
لنفترض أن لديك 1000 توكن بنسبة 0.75 وسعر قدره 2 USD لكل مليون توكن. عدد الكلمات = \( 1000 \times 0.75 = \) 750 كلمة. التكلفة = \( (1000 \div 1{,}000{,}000) \times 2 = \) 0.002 دولار.
أربعة رموز تقريبًا تعادل نحو ثلاث كلمات (بنسبة 0.75).
الأسئلة الشائعة
ما مدى دقة تقدير عدد الكلمات؟ إنه تقدير تقريبي فحسب. فطريقة تقسيم النص إلى توكنات تختلف من نموذج لآخر وبحسب نوع المحتوى؛ ومع ذلك تظل قيمة 0.75 كلمة لكل توكن متوسطًا موثوقًا للنصوص الإنجليزية.
هل تكلفة توكنات الإدخال وتوكنات الإخراج متساوية؟ لا، فكثير من المزوّدين يفرضون أسعارًا مختلفة لكل منهما. شغّل الحاسبة مرتين، مرة بكل سعر، ثم اجمع النتيجتين.
لماذا تختلف الأكواد والنصوص غير الإنجليزية؟ لأنها غالبًا ما تستهلك توكنات أكثر لكل كلمة، لذا خفّض النسبة (إلى 0.5 مثلًا) للحصول على تقدير أدق.
قدّر فاتورتك الشهرية لـ LLM API انطلاقًا من عدد التوكنات في كل طلب وعدد الطلبات شهريًا، بأسعار القوائم الحالية من Anthropic وOpenAI وGoogle وMistral وDeepSeek، مع أسعار الإدخال المخزّن مؤقتًا وBatch API، ومقارنة جنبًا إلى جنب بين جميع النماذج.
قدّر عدد الرموز في الثانية لاستدلال نماذج LLM على وحدات H100 وH200 وA100 وL40S وL4 وMI300X، وتكلفة الاستضافة الذاتية لكل مليون رمز، وحجم التعادل الشهري مقارنةً بسعر API.
حوّل الأرقام إلى كلمات منطوقة حرفًا بحرف (123 تصبح «واحد اثنان ثلاثة»). اقرأ أرقام الشحنات والتواريخ والأرقام التسلسلية بـ12 لغة مع خيارات لحالة الأحرف.