← أحدث الأبحاث
💬 NLP

Causality \neq Invariance: Function and Concept Vectors in LLMs

تُثبت هذه الورقة أنه بينما تمتلك النماذج اللغوية الكبيرة تمثيلات لمفاهيم مجردة (متجهات المفاهيم) التي تعمم عبر تنسيقات ولغات المدخلات، فإن متجهات الوظائف المستخدمة عادةً لتعزيز أداء التعلم في السياق هي محددة بتنسيق معين وتفتقر إلى هذا الثبات.

المؤلفون الأصليون: Gustaw Opiełka, Hannes Rosenbusch, Claire E. Stevenson

نُشر 2026-02-27
📖 5 دقيقة قراءة🧠 قراءة متعمّقة

المؤلفون الأصليون: Gustaw Opiełka, Hannes Rosenbusch, Claire E. Stevenson

البحث الأصلي مرخَّص بموجب CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). هذا شرح مولَّده بالذكاء الاصطناعي للبحث أدناه. لم يكتبه المؤلفون ولم يصادقوا عليه. وللتحقق من الدقة التقنية، يرجى الرجوع إلى البحث الأصلي. اقرأ إخلاء المسؤولية الكامل

إليك شرح لورقة البحث "Causality ≠ Invariance: Function and Concept Vectors in LLMs" باستخدام لغة بسيطة وتشبيهات إبداعية.

السؤال الكبير: هل "تفكر" نماذج الذكاء الاصطناعي بشكل تجريدي؟

تخيل أنك تقوم بتعليم روبوت فهم مفهوم "الأضداد" (مثل حار مقابل بارد، أو كبير مقابل صغير).

يمكنك تعليمه بطرق مختلفة:

  1. مفتوحة النهاية: "حار يقابل بارد، كما أن كبير يقابل..."
  2. اختيار من متعدد: "حار يقابل بارد. كبير يقابل... (أ) صغير (ب) ذكي."
  3. لغة مختلفة: "Chaud est à Froid comme Grand est à..." (بالفرنسية).

السؤال الكبير الذي تطرحه هذه الورقة هو: هل يمتلك الروبوت مفتاحاً واحداً تجريدياً واحداً لـ "الأضداد" في دماغه يعمل بغض النظر عن كيفية طرح السؤال؟ أم أنه يمتلك مفاتيح مختلفة لـ "أضداد مفتوحة النهاية"، و"أضداد الاختيار من متعدد"، و"أضداد باللغة الفرنسية"؟

الإجابة هي: إنه يمتلك كليهما، لكنهما جزءان مختلفان من الدماغ.


نوعا "المتجهات" (أدوات الروبوت)

اكتشف الباحثون أن النماذج اللغوية الكبيرة (LLMs) تستخدم نوعين متميزين من الأدوات الداخلية لحل هذه المهام. أطلقوا عليهما اسم متجهات الوظيفة (Function Vectors) ومتجهات المفهوم (Concept Vectors).

1. متجهات الوظيفة (FVs): "الميكانيكيون المتخصصون"

  • ماهيتها: هي الأجزاء من النموذج التي تجعل الروبوت يجيب بشكل صحيح فعلياً. إنها "العضلة" التي تدفع الأداء.
  • العائق: هي ليست تجريدية. إنها مثل ميكانيكي بارع جداً في إصلاح نوع معين من السيارات (مثل سيارة سيدان حمراء) ولكنه يرتبك إذا أحضرت له شاحنة زرقاء.
  • المشكلة: إذا استخرجت "متجه الوظيفة" لـ "الأضداد" من سؤال بالإنجليزية مفتوح النهاية، فإنه سيبدو مختلفاً تماماً (كأنه لغة أخرى) عن المتجه الذي تحصل عليه من سؤال بالفرنسية بنظام الاختيار من متعدد.
  • التشبيه: فكر في متجهات الوظيفة كأنها مفاتيح مصممة خصيصاً.
    • المفتاح (أ) يفتح باب "الإنجليزية مفتوحة النهاية".
    • المفتاح (ب) يفتح باب "الفرنسية اختيار من متعدد".
    • ورغم أن كلا المفتاحين يفتحان الباب المؤدي لغرفة "الأضداد"، إلا أنهما لا يتشابهان في شيء. إذا حاولت استخدام المفتاح (أ) في الباب الفرنسي، فلن يعمل بشكل جيد.

2. متجهات المفهوم (CVs): "الفلاسفة التجريديون"

  • ماهيتها: هي الأجزاء من النموذج التي تفهم الفكرة النقية لـ "الأضداد"، بغض النظر عما إذا كانت بالإنجليزية أو الفرنسية أو اختبار اختيار من متعدد.
  • العائق: هي ليست المحرك الرئيسي للإجابة. إنها مثل الفيلسوف الذي يفهم نظرية الأضداد تماماً، لكنه لا يعرف كيف يدير المفتاح لفتح الباب.
  • الميزة: هي ثابتة (Invariant). مفهوم "الأضداد" في الإنجليزية يبدو تماماً مثل مفهوم "الأضداد" في الفرنسية.
  • التشبيه: فكر في متجهات المفهوم كأنها مخطط هندسي عالمي (Blueprint).
    • سواء كنت تبني منزلاً في نيويورك أو طوكيو، فإن المخطط لـ "باب" هو نفسه. هو لا يهتم بلون الطلاء أو اللغة المكتوبة على اللافتة.

التجربة: توجيه الروبوت

لإثبات ذلك، حاول الباحثون "توجيه" الروبوت. تخيل أن الروبوت عالق في ممر، وأنت تريد دفعه نحو غرفة "الأضداد" بدلاً من غرفة "الترجمة".

  • استخدام متجهات الوظيفة (المفاتيح):

    • إذا استخدمت "مفتاح الإنجليزية مفتوحة النهاية" لتوجيه الروبوت، فإنه يعمل بشكل مذهل إذا كان الروبوت يواجه حالياً سؤالاً إنجليزياً مفتوح النهاية.
    • ولكن: إذا حاولت استخدام نفس المفتاح لتوجيه الروبوت عندما يواجه سؤالاً فرنسياً، فإنه يفشل. يصاب الروبوت بالارتباك وقد يبدأ بالتحدث بالفرنسية أو التعثر في تنسيق السؤال.
    • النتيجة: رائع للمواقف المحددة، سيء جداً للمواقف الجديدة.
  • استخدام متجهات المفهوم (المخطط الهندسي):

    • إذا استخدمت "المخطط العالمي" لتوجيه الروبوت، فإنه يعمل بشكل ثابت عبر جميع المواقف (الإنجليزية، الفرنسية، الاختيار من متعدد).
    • ولكن: الدفعة تكون أضعف. إنها لا تجبر الروبوت على الإجابة بقوة مثلما تفعل المفاتيح المتخصصة.
    • النتيجة: ليست أقوى دفعة، لكنها تعمل في كل مكان دون أن تسبب خللاً.

الخلاصة الرئيسية (بلغة بسيطة)

  1. السببية لا تعني الثبات (Causality is not Invariance): مجرد كون جزء من الذكاء الاصطنا�ي يسبب الإجابة الصحيحة (متجه الوظيفة)، لا يعني أن هذا الجزء يمثل الفكرة التجريدية (متجه المفهوم). الذكاء الاصطناعي يستخدم جزءاً لـ "أداء" المهمة وجزءاً آخر لـ "فهم" المهمة.
  2. "فخ التنسيق": الأجزاء من الذكاء الاصطناعي التي تنجز العمل فعلياً (متجهات الوظيفة) تتأثر بشدة بـ كيفية طرح السؤال. فهي تخلط بين "الفكرة" و"التنسيق".
    • مثال: متجه "الأضداد" لسؤال الاختيار من متعدد يتضمن بالخطأ شكل الأقواس (أ) (ب).
  3. الفهم التجريدي موجود: الذكاء الاصطناي لديه بالفعل فهم تجريدي نقي للمفاهيم (متجهات المفهوم)، ولكن هذه المتجهات مخفية في جزء مختلف من الشبكة عن الأجزاء التي تولد النصوص فعلياً.
  4. المقايضة:
    • هل تريد من الذكاء الاصطناي أن يؤدي بشكل مثالي في نوع معين من الاختبارات؟ استخدم متجهات الوظيفة.
    • هل تريد من الذكاء الاصطناي أن يعمم ويفهم الفكرة الجوهرية عبر لغات وتنسيقات مختلفة؟ استخدم متجهات المفهوم.

الاستعارة النهائية: الأوركسترا

تخيل أن الذكاء الاصطناي هو أوركسترا تعزف مقطوعة تسمى "الأضداد".

  • متجهات الوظيفة هي عازف الكمان الرئيسي. إنه صاخب، يقود اللحن، ويجعل المقطوعة تبدو رائعة. لكنه يعزف جيداً فقط إذا كانت النوتة الموسيقية مكتوبة بأسلوب محدد (مثل الموسيقى الكلاسيكية). إذا أعطيته نوتة "جاز"، فسيصاب بالارتباك.
  • متجهات المفهوم هي المايسترو (القائد). إنه يفهم روح المقطوعة تماماً، سواء كانت كلاسيكية، أو جاز، أو روك. هو يعرف تماماً معنى "الأضداد". ومع ذلك، هو لا يعزف آلة موسيقية، لذا لا يمكنه جعل الصوت عالياً مثل عازف الكمان.

توضح الورقة أنه لجعل الذكاء الاصطناي ذكياً ومرناً حقاً، نحتاج إلى إدراك أن المايسترو (المفهوم) وعازف الكمان (الوظيفة) هما شخصان مختلفان يقومان بوظيفتين مختلفتين، رغم أنهما في نفس الأوركسترا.

غارق في أبحاث مجالك؟

تصلك نشرة يومية بأحدث الأبحاث المطابقة لكلماتك البحثية المفتاحية — مع ملخصات تقنية، بلغتك.

جرّب Digest →