Scaling In, Not Up? Testing Thick Citation Context Analysis with GPT-5 and Fragile Prompts
تُظهر هذه الورقة أنه بينما يمكن لـ GPT-5 أن يعمل كمحلل مساعد مستقر لتحليل سياق الاستشهاد الكثيف من خلال توليد فرضيات تفسيرية متنوعة، فإن قراءاته ومفرداته المحددة تتشكل بشكل منهجي بواسطة هيكلة المطالبات، مما يؤدي غالباً إلى تحويل التركيز من التوبيخ إلى النسب مقارنة بإعادة البناء التي يقوم بها الخبراء البشر.
البحث الأصلي مرخَّص بموجب CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). هذا شرح مولَّده بالذكاء الاصطناعي للبحث أدناه. لم يكتبه المؤلفون ولم يصادقوا عليه. وللتحقق من الدقة التقنية، يرجى الرجوع إلى البحث الأصلي. اقرأ إخلاء المسؤولية الكامل
تخيل أنك تحاول فهم مصافحة سرية بين شخصين. ترى الشخص (أ) يذكر الشخص (ب) في خطاب ما. في الظاهر، يبدو الأمر وكأنه مجرد "شكر وتقدير". ولكن، هل هو كذلك حقاً؟ أم أنه نقد مبطن؟ أو طريقة لقول: "أنا أذكى منك"، أو "أنا أستعير فكرتك دون إعطائك الفضل الكامل"؟
لعقود من الزمن، حاول العلماء استخدام الحواسيب لتصنيف هذه "المصافحات" (الاستشهادات المرجعية) إلى فئات مرتبة مثل "ثناء"، أو "نقد"، أو "مجرد إشارة". أرادوا التوسع في النطاق (Scale up): بناء روبوت يمكنه قراءة مليون ورقة بحثية وتصنيف كل واحدة منها بسرعة.
هذه الورقة البحثية تطرح سؤالاً مختلفاً: ماذا لو توقفنا عن محاولة إجبار الروبوت على إعطائنا ملصقاً (تصنيفاً) واحداً فقط؟ ماذا لو سألنا الروبوت بدلاً من ذلك أن يتوسع في العمق (Scale in)؟ ماذا لو طلبنا منه أن يجلس، ويقرأ نفس الجملة المعقدة مراراً وتكراراً، ويولد عدداً كبيراً من القصص المختلفة والمعقولة حول ما قد تعنيه تلك الجملة؟
إليك قصة التجربة، مشروحة ببساطة.
"الحالة الصعبة": حاشية صغيرة
اختار المؤلف حاشية صغيرة ومثيرة للجدل من ورقة علمية شهيرة تعود لعام 1975. إنها تشبه ملاحظة غامضة وصغيرة في هامش كتاب.
- النص: "لقد استعرنا هذه الفكرة من الشخص (X)، ثم كررها الشخص (Y). سنتوقف عن القلق بشأن الفرق بينهما في الوقت الحالي".
- اللغز: باحث مشهور يدعى "جيلبرت" نظر إلى هذا النص قبل سنوات وقال: "انتظر لحظة. الشخص (Y) كرر كلام الشخص (X)، لكنه لم ينسب الفضل فعلياً للشخص (X) عندما عرّف الفكرة! هذه الحاشية هي في الواقع إهانة مهذبة ومبطنة. إنها تقول: 'مهلاً، لقد نسيت تقديم الفضل، لذا سنقوم نحن بتصحيح كتب التاريخ نيابة عنك'".
أراد المؤلف معرفة ما إذا كان بإمكان ذكاء اصطناعي فائق الذكاء (GPT-5) اكتشاف ذلك، ليس عبر التخمين بإجابة واحدة، بل عبر التصرف كـ محقق يدون كل نظرية محتملة.
التجربة: "المحقق ذو المرحلتين"
لم يكتفِ المؤلف بسؤال الذكاء الاصطناعي: "ماذا يعني هذا؟"، فهذا سؤال غامض للغاية. بدلاً من ذلك، بنى مساراً يتكون من مرحلتين:
- المرحلة الأولى: المسح السطحي.
نظر الذكاء الاصطناعي فقط إلى الحاشية. تصرف كروبوت قياسي، قائلاً: "هذه تبدو كرسالة 'شكر وتقدير' عادية". (كان متسقاً جداً هنا، تماماً كما يفعل البشر). - المرحلة الثانية: الغوص العميق.
الآن، حصل الذكاء الاصطناعي على القصة كاملة. رأى الورقة الأصلية، والورقة التي استشهدت بها، والورقة التي استشهدت بالورقة السابقة. قيل له: "حسناً، لقد قلت إنها رسالة 'شكر'. ولكن الآن، انظر إلى القرائن. هل هناك معانٍ خفية؟ اكتب خمس نظريات مختلفة حول ما يحدث حقاً".
التحول: "الدفعة التوجيهية"
هنا يصبح الأمر مثيراً للاهتمام حقاً. أدرك المؤلف أن "شخصية" الذكاء الاصطناعي تتغير بناءً على طريقة التحدث إليه. لذا، جرب ثلاث طرق مختلفة لطرح السؤال:
- السؤال "المحايد": "فقط أخبرني بما تعتقده".
- الدفعة "نحو" (Toward): أعطى المؤلف الذكاء الاصطناعي تلميحاً صغيراً، مثل معلم يهمس: "تذكر، أحياناً يستخدم الناس الاستشهادات لإعادة كتابة التاريخ أو لإخفاء النقد".
- الدفعة "بعيداً عن" (Away): أعطى المؤلف تلميحاً مختلفاً: "أحياناً يستخدم الناس الاستشهادات فقط لجعل قائمة مراجعهم تبدو طويلة، أو لتعليم الطلاب".
ماذا حدث؟
كانت النتائج رائعة، مثل مشاهدة حرباء تغير ألوانها بناءً على الخلفية.
- الذكاء الاصطناعي "مولد رائع للأفكار":
لم يعطِ الذكاء الاصطناعي إجابة واحدة فحسب، بل أنتج 450 نظرية مختلفة. بعضها كان مملاً ("كانوا فقط يريدون أن يكونوا مهذبين"). بعضها كان عبقرياً ("كانوا يحاولون إسكات منافس"). وبعضها كان جامحاً ("كانوا يحاولون تعليم طالب").
- التشبيه: تخيل أنك تسأل صديقاً أن يخمن ما يدور في ذهن شخص غريب. الشخص العادي قد يقول: "يبدو سعيداً". أما الذكاء الاصطناعي، عندما يتم توجيهه بشكل صحيح، فيقول: "يبدو سعيداً، أو أنه يخفي سراً، أو أنه متوتر بشأن اختبار، أو أنه يتظاهر بالسعادة لإثارة الإعجاب". إنه يوسع دائرة الاحتمالات.
- "الدفعة" غيرت القصة:
- عندما دفع المؤلف الذكاء الاصطناعي "نحو" (التلميح بوجود انتقادات خفية)، بدأ الذكاء الاصطناعي في كتابة المزيد من القصص حول صراعات القوة، وسرقة الفضل، والإهانات المبطنة. بدأ يبدو مثل العالم "جيلبرت".
- عندما دفع المؤلف الذكاء الاصطناعي "بعيداً عن" (التلميح بالتعليم أو اللباقة الاجتماعية)، توقف الذكاء الاصطناعي عن البحث عن المشاجرات وبدأ يكتب قصصاً عن تعليم الطلاب أو بناء الجسور بين المجموعات.
- التشبيه: الأمر يشبه طلبك من محقق حل جريمة. إذا قلت له: "فكر كجاسوس"، سيجد المحقق جواسيس. إذا قلت له: "فكر كمعلم"، سيجد فصلاً دراسياً. القرائن هي نفسها، لكن القصة تتغير بناءً على التلميح الذي تقدمه.
- الذكاء الاصطناعي أغفل "الإهانة الكبرى":
حتى مع وجود التلميحات، نادراً ما استنتج الذكاء الاصطناعي أن الحاشية كانت إهانة مباشرة. فضل التفكير في أن المؤلفين كانوا فقط "يديرون سمعتهم" أو "ينظمون شجرة أفكارهم". كان مهذباً أكثر من اللازم ليتخيل شجاراً علنياً.
- لماذا؟ تم تدريب الذكاء الاصطناعي ليكون مفيداً ولطيفاً. إنه مثل الدبلوماسي الذي يرى اجتماعاً متوتراً ويفكر: "أوه، إنهم يتفاوضون فقط"، بدلاً من "إنهم على وشك بدء حرب".
الخلاصة الكبرى
هذه الورقة لا تتعلق باستبدال العلماء البشر بالروبوتات، بل تتعلق بـ تغيير كيفية استخدامنا للروبوتات.
- الطريقة القديمة (التوسع في النطاق - Scaling Up): "أيها الروبوت، اقرأ مليون ورقة بحثية وأخبرني إذا كان هذا 'جيداً' أم 'سيئاً'". (غالباً ما يخطئ الروبوت لأن المعنى البشري معقد وغير منظم).
- الطريقة الجديدة (التوسع في العمق - Scaling In): "أيها الروبوت، اقرأ هذه الجملة المعقدة الواحدة. كن محللاً مشاركاً لي. أعطني 10 طرق مختلفة لتفسيرها. أرني الأدلة لكل منها. ثم، أنا (الإنسان) سأقرر أي قصة هي الأكثر منطقية".
الاستعارة النهائية:
فكر في الذكاء الاصطناعي ليس كـ قاضٍ (الذي يعطي حكماً نهائياً)، بل كـ شريك في الكتابة الإبداعية.
إذا طلبت من شريك الكتابة: "اكتب قصة حول هذه الجملة"، فقد يعطيك مأساة، أو كوميديا، أو غموضاً. هو لا يخبرك أي واحدة منها هي "الحقيقة". هو فقط يقدم لك قائمة من الاحتمالات. ثم، أنت، الخبير البشري، تختار القصة التي تتوافق مع الواقع.
تظهر الورقة أنه إذا عاملنا الذكاء الاصطناعي كأداة لتوسيع خيالنا بدلاً من مجرد أداة لتسريع عملية التصنيف، فيمكننا الكشف عن معانٍ خفية في العلم قد نغفل عنها بمفردنا. ولكن يجب أن نكون حذرين: الطريقة التي نطرح بها السؤال تغير الإجابة، لذا يجب علينا دائماً مراجعة عمل الروبوت.
غارق في أبحاث مجالك؟
تصلك نشرة يومية بأحدث الأبحاث المطابقة لكلماتك البحثية المفتاحية — مع ملخصات تقنية، بلغتك.