ما هو النموذج اللغوي الكبير (LLM)؟ وكيف يعمل ChatGPT وGemini

النموذج اللغوي الكبير LLM نموذج تعلم عميق ضخم مدرب على كميات هائلة من النصوص لفهم اللغة وتوليدها، وهو المحرك وراء ChatGPT وGemini وClaude.

الخلاصة في نقاط

  • يتعلم بتوقع الكلمة (التوكن) التالية في نصوص ضخمة.
  • مبني على معمارية المحوّل (Transformer) منذ 2017.
  • أمثلة: GPT وGemini وClaude وLlama، وعربيًا: علّام وجيس.

النموذج اللغوي الكبير (Large Language Model – LLM) هو نموذج تعلم عميق يحتوي على مليارات المعاملات، دُرّب على كميات هائلة من النصوص ليتوقع التوكن التالي في أي نص. ومن هذا الهدف البسيط يكتسب قدرات واسعة: الإجابة عن الأسئلة، والتلخيص، والترجمة، والكتابة، والبرمجة، والاستدلال. وهو المحرك وراء أدوات الذكاء الاصطناعي التوليدي مثل ChatGPT وGemini وClaude.

كيف يعمل النموذج اللغوي الكبير؟

  1. التقطيع: يُقسَّم النص إلى توكنات وتحوَّل إلى أرقام.
  2. الانتباه: تقيس معمارية المحوّل علاقة كل توكن بكل التوكنات الأخرى في نافذة السياق.
  3. التوقع: يحسب النموذج احتمال كل توكن ممكن ليكون التالي، ويختار واحدًا.
  4. التكرار: يضيف التوكن المختار ويعيد الخطوات حتى تكتمل الإجابة.

مراحل بناء النموذج

المرحلةما يحدث
التدريب المسبققراءة نصوص ضخمة من الويب والكتب والشيفرات وتعلم توقع التوكن التالي
الضبط الدقيق بالتعليماتالتدريب على أمثلة سؤال وجواب ليتبع التعليمات
المواءمة بملاحظات البشر (RLHF)تحسين الإجابات لتكون مفيدة وصادقة وآمنة وفق تقييمات بشرية

حدود النماذج اللغوية

  • قد تهلوس فتنتج معلومات خاطئة بثقة.
  • معرفتها محدودة بتاريخ بيانات التدريب ما لم تُربط بالبحث أو بتقنية RAG.
  • قد تعكس تحيزات البيانات التي تعلمت منها.

أسئلة شائعة

ما أشهر النماذج اللغوية الكبيرة؟

من أشهرها عائلات GPT من OpenAI، وGemini من Google، وClaude من Anthropic، وLlama من Meta، ومن النماذج العربية علّام من سدايا وجيس من الإمارات.

ما الفرق بين النموذج اللغوي الكبير وChatGPT؟

النموذج هو المحرك، وChatGPT هو التطبيق أو الواجهة التي تتحدث معه وتضيف إليه أدوات مثل البحث وقراءة الملفات.

هل يفهم النموذج اللغوي الكبير ما يقول؟

يتعامل مع أنماط إحصائية معقدة في اللغة؛ ونقاش «الفهم» الحقيقي ما زال مفتوحًا بين الباحثين، لكن عمليًا يجب التحقق من مخرجاته.

المراجع

  1. Vaswani, A. et al. (2017). Attention Is All You Need. arxiv.org/abs/1706.03762.
  2. Ouyang, L. et al. (2022). Training language models to follow instructions with human feedback. arxiv.org/abs/2203.02155.
  3. IBM. What are large language models? ibm.com.

إدارة بالعربي

هل تبحث عن تعريف مصطلح إداري؟ تصفح قاموسنا المختصر.