ما هو النموذج اللغوي الكبير (LLM)

ما الرمز ولماذا يحسب كل شيء به

لا يرى النموذج النص كلمة كلمة. بل يقسمه أولا إلى قطع تسمى الرموز: أحيانا كلمة كاملة، وأحيانا نصف كلمة، وأحيانا علامة ترقيم أو مسافة فقط. ولم يكتب أحد هذا التقسيم يدويا؛ بل استخرج من النص نفسه الذي دُرب عليه النموذج. ولهذا تصير الكلمات الشائعة رمزا واحدا عادة، وتتفتت الكلمات النادرة إلى عدة قطع.

ولماذا يهمك هذا: كل ما يحسب في هذه الأدوات يحسب بالرموز. سقف المدخل وسقف المخرج والفاتورة. وحين تقرأ أن المدخل يكلف كذا دولارا لكل مليون رمز، فهذه هي الوحدة، لا الكلمات ولا الحروف.

ونقطة جادة لمن يكتب بلغة أقل حضورا: اللغة التي ظهرت أقل في نص التدريب تتفتت عادة إلى رموز أدق، أي أن المعنى نفسه يكتب بعدد رموز أكبر فيكلف أكثر. ونحن لم نقس هذا على هذا الخادم، لأن أي مجزئ رموز لهذه النماذج غير مثبت هنا، ولا نكتب رقما بلا مصدر. فإن كان الأمر يهمك، ضع فقرة وترجمتها في عداد الرموز الخاص بالشركة الصانعة وضع الرقمين جنبا إلى جنب؛ يستغرق ذلك عشر ثوان والجواب لك أنت.

كم تبلغ نافذة السياق وما ليست هي

نافذة السياق هي سقف ما يستطيع النموذج رؤيته دفعة واحدة: مطالبتك، والملفات التي أرفقتها، والمحادثة كلها حتى الآن، مجتمعة. وكل ما يبقى خارج هذا السقف غير موجود بالنسبة إليه. لم ينسه؛ بل لم يره أصلا.

والأحجام كبيرة وتختلف بين الشركات. ففي مرجعنا الموثق، يملك كلود أوبس ٥ نافذة مليون رمز، وهذا ما تقوله وثائق نماذج أنثروبيك. ويقف GPT-5.6 Terra عند مليون وخمسين ألف رمز بحسب صفحة النموذج لدى أوبن إيه آي. أما لاما ٤ سكاوت المفتوح الأوزان فمعلن على بطاقة نموذج ميتا بعشرة ملايين رمز؛ وهذا الأخير ادعاء الصانع لا شيء قسناه نحن.

والآن ما ليست هي نافذة السياق: ليست ذاكرة. فالنموذج لا يتذكر شيئا بين محادثتين، وداخل المحادثة الواحدة يعيد قراءة النص كله في كل دور. ولهذا تصير المحادثة الطويلة أغلى وأبطأ. والقاعدة التي نتبعها نحن بسيطة: في الجلسة الطويلة نعيد كتابة التعليمة المهمة قرب النهاية بدل الاكتفاء بذكرها في البداية.

وتحذير بشأن هذه الأرقام نفسها: النافذة الأكبر تعني أن النموذج يرى أكثر، لا أنه يفهم أفضل. ولا تعد أي شركة بأن جودة الجواب في آخر نافذة من عشرة ملايين رمز تساوي جودته في أولها.

التدريب والتنفيذ: عملان مختلفان تماما

أمران يختلطان باستمرار. التدريب يحدث مرة واحدة، ويستغرق أسابيع أو أشهرا، ويعمل على كتلة من العتاد الغالي، وينتج ملف أوزان يتوقف بعدها عن التغير. أما التنفيذ فهو ما يحدث حين تكتب أنت: الأوزان ثابتة، ومدخلك وحده يمر عبرها لينتج مخرجا.

وما ينتج عن هذا الفصل ولا يتوقعه أغلب الناس: النموذج لا يتعلم من محادثتك. صحح خطأه اليوم، وسيكرر الخطأ نفسه غدا في محادثة جديدة. وما تسميه بعض المنتجات ذاكرة هو مذكرة محفوظة بجوار النموذج وتلصق في بداية المحادثة، لا تغيير في النموذج نفسه.

وشرط يتصل بالفقرة التالية ولا يجوز الخلط بينه وبين ما سبق: كون النموذج لا يتعلم من محادثتك لا يعني أن نصك لا يخزن في مكان ما. فالاحتفاظ بالبيانات، وهل تغذي تدريب النسخ اللاحقة، قرار الشركة الصانعة ويختلف بحسب نوع الحساب والإعدادات.

لماذا كلمة «يعرف» كلمة خاطئة

يفعل النموذج اللغوي في كل خطوة شيئا واحدا: بالنظر إلى كل الرموز حتى الآن، يحسب أي رمز تال أرجح، ويختار واحدا، ثم يبدأ من جديد. والجملة التي تقرأها هي تكرار هذه الخطوة الواحدة، لا استرجاع جواب مخزن في مكان ما.

ويترتب على ذلك أمران مباشرة. الأول أنه يكتب ما لا يعرفه بالطلاقة نفسها، لأن ليس في هذا الحساب أي إشارة تقول إن هذا الجزء حقيقة وذاك مختلق. ولهذا قد يبدو عنوان مقال أو رقم صفحة صحيحا تماما وهو غير موجود. وأنثروبيك نفسها تسمي هذا هلوسة في وثائقها وتشرح سبل تقليله، أي أن الشركة الصانعة تعده ضعفا حقيقيا لا إشاعة.

والثاني أن اختيار الرمز التالي لا يذهب دائما إلى الخيار الأرجح؛ فثمة قدر من العشوائية، وهو ما يجعل السؤال نفسه يحصل على جوابين مختلفين. ويمكن التحكم بذلك عبر الوصول البرمجي، أما في نافذة الدردشة فلا عادة.

ومحك عملي أقصر من أي نقاش فلسفي: كل ادعاء يعطيك إياه النموذج ولا تستطيع فتحه ورؤيته في أقل من دقيقة يبقى ادعاء. وهذه الجملة تصلح لأي نموذج، هذا العام والعام المقبل.

ما فائدة هذا الشرح في العمل اليومي

أربعة أمور، كل منها آت مباشرة من فقرة أعلاه. الأول: بما أن النموذج يعيد قراءة المحادثة كلها في كل دور، فجزّئ الجلسات الطويلة وابدأ كل عمل جديد على صفحة فارغة. والثاني: بما أنه يختلق المراجع، فلا تقبل أي مصدر دون فتح رابطه؛ وإن لم يعطك رابطا أصلا فلم يجرِ بحث.

والثالث: بما أن الفاتورة بالرموز، فطلب مخرج أقصر أرخص فعلا، وإرسال ملف من مئة صفحة للحصول على جواب من سطرين أغلى فعلا. والرابع: بما أن النموذج لا يتعلم من محادثتك، فاحفظ التعليمة التي تكررها في كل مرة في ملف قصير والصقها في بداية كل جلسة. هذه العادة وحدها أعادت لنا في عملنا وقتا أكثر من أي شيء آخر، ولا تحتاج اشتراكا أغلى.

وأمر لا يعطيك إياه هذا الشرح: أي نموذج أفضل لعملك. فذلك الجواب يعتمد على المعايير والسعر والإتاحة، ويتغير من أسبوع إلى آخر، ولهذا مكانه قسم المرجع في هذا الموقع لا درس مفاهيمي يفترض أن يبقى صحيحا العام المقبل أيضا.