How Do Algorithms Interact in Scientific Research? Large-Scale Semantic Relation Identification and Analysis Based on Full-Text Papers
تبني هذه الدراسة إطاراً لتحديد وتحليل العلاقات الدلالية بين كيانات الخوارزميات في الأوراق البحثية الكاملة في مجال معالجة اللغات الطبيعية، كاشفةً أن نموذج SciBERT يتفوق في استخراج العلاقات، بينما يُظهر المجال شبكات تفاعل متوسعة ومتعمقة ومتطورة بسرعة تهيمن عليها العلاقات المقارنة.
المؤلفون الأصليون:Yuzhuo Wang, Yi Zhao, Wenqing Wu, Heng Zhang
تخيل عالم العلوم كمكتبة ضخمة وصاخبة، حيث كل كتاب هو فكرة جديدة، و"الشخصيات" داخل هذه الكتب هي الخوارزميات — وهي مجموعات خاصة من التعليمات التي تُعلم الحواسيب كيف تفكر، وتتعلم، وتحل المشكلات. لفترة طويلة، كان الباحثون بارعين في رصد شخصيات هذه الخوارزميات وعدّ عدد مرات ظهورها. لكن مجرد معرفة من يتواجد في الغرفة لا يخبرك بما يفعلونه. هل هم أعز أصدقاء يعملون معاً؟ هل هم خصوم شرسون يتنافسون على الصدارة؟ أم أن أحدهم مجرد أداة يستخدمها الآخر لإنجاز مهمة ما؟ لكي نفهم حقاً كيف يتقدم العلم، نحتاج إلى رسم خريطة للعلاقات بين هذه الشخصيات، وليس فقط سرد أسمائهم. هذا يشبه محاولة فهم دراما مدرسية ثانوية عبر النظر فقط إلى مخطط الجلوس؛ فأنت بحاجة لمعرفة من يهمس بالأسرار، ومن يتحدى الآخر في مبارزة، ومن يستعير قلماً ليؤدي عملاً ما لترى القصة الحقيقية.
تغوص هذه الورقة البحثية في أعماق "دراما" معالجة اللغات الطبيعية (NLP)، وهو مجال تتعلم فيه الحواسيب كيفية فهم اللغة البشرية. لقد تعامل الباحثون مع آلاف الأوراق الأكاديمية كأنها نص مسرحي ضخم، باحثين عن كل ذكر لخوارزمية ما. وبدلاً من مجرد عدّها، بنوا نظاماً متطوراً لتحديد كيفية ارتباط هذه الخوارقات ببعضها البعض بدقة داخل النص. لقد اختبروا أدوات "تحرٍّ" مختلفة، بما في ذلك نماذج ذكاء اصطناعي قوية وجديدة، لمعرفة أي منها يمكنه قراءة السياق بشكل أفضل وتحديد ما إذا كان خوارزميان يتبادلان الملاحظات، أو يتعاونان في مشروع ما، أو إذا كان أحدهما هو "الأصل" للآخر.
وجدت الدراسة أن التفاعل الأكثر شيوعاً في هذا العالم العلمي هو المنافسة. علاقة "المقارنة" (Compare) هي النجم الساطع، حيث ظهرت في أكثر من نصف جميع الروابط التي وجدها الباحثون. اتضح أن العلماء يحبون وضع أفكارهم الجديدة في مواجهة الأفكار الموجودة مسبقاً ليروا من الأفضل أداءً. وبينما توجد الكثير من علاقات "الاستخدام" (Use) و"التعاون" (Collaborate) (حيث تساعد خوارزمية أخرى)، فإن المجال تهيمن عليه منظومة شرسة من المعايير المرجعية والمواجهات المباشرة. كما اكتشف الباحثون أن هذه العلاقات تزداد حدة بمرور الوقت؛ فشبكات الخوارزميات تكبر، وتتصل بعمق أكبر، وتتغير بسرعة أكبر من أي وقت مضى. يبدو الأمر كما لو أن المجتمع العلمي ينتقل من مكتبة هادئة إلى حلبة صاخبة حيث يجب على كل خوارزمية جديدة أن تثبت أنها أفضل من سابقتها.
ولحل لغز من يرتبط بمن، كان على الفريق أن يكون حذراً للغاية. لقد جمعوا أوراقاً من ثلاثة مؤتمرات رئيسية تمتد لعقود، ودربوا نماذج الذكاء الاصطناعي الخاصة بهم على رصد الإشارات الدقيقة في النص. ووجدوا أنه بينما النماذج الضخمة والمدربة مسبقاً (مثل تلك التي تشغل روبوتات الدردشة) جيدة جداً في تخمين العلاقات دون تدريب مكثف، فإن نموذجاً متخصصاً يسمى SciBERT كان أفضل محقق على الإطلاق، حيث حقق أعلى دقة. كما لاحظ الباحثون أن الذكاء الاصطناعي يرتبك أحياناً، خاصة عندما تذكر جملة واحدة أربع أو خمس خوارزميات مختلفة في آن واحد، أو عندما تكون العلاقة ضمنية بدلاً من أن تكون صريحة. ورغم هذه العقبات، نجحت الدراسة في رسم "شبكة علاقات" توضح كيف تتطور الخوارزميات. وهي تشير إلى أن مستقبل هذا المجال لا يقتصر فقط على اختراع أدوات جديدة، بل يتعلق بكيفية اختبار هذه الأدوات ومقارنتها وتطويرها باستمرار ضد بعضها البعض في دورة تسارع مستمرة من الابتكار.
ملخص تقني: كيف تتفاعل الخوارزميات في البحث العلمي؟
بيان المشكلة في عصر الذكاء الاصطناعي، تُعد الخوارزميات محركات مركزية للابتكار العلمي. وبينما نجحت الأبحاث الحالية في تحديد كيانات الخوارزميات وتحليل تكرار ذكرها وتزامن ظهورها، إلا أن هذه النهج تقدم رؤية محدودة حول طبيعة التفاعلات بين الخوارميات. إن تحليل التزامن (Co-occurrence) يمكن أن يشير إلى ظهور خوارزميتين معاً، لكنه يفشل في تفسير سبب ظهورهما معاً، أو كيفية تنافسهما، أو تعاونهما، أو تطورهما. هناك نقص في تحديد العلاقات الدلالية واسعة النطاق ودقيقة التفاصيل التي تتجاوز مجرد قوائم الكيانات البسيطة إلى رسوم بيانية هيكلية للعلاقات، مما يعيق الفهم المنهجي لمسارات ابتكار الخوارزميات وتطور المجتمعات العلمية.
المنهجية تركز هذه الدراسة على مجال معالجة اللغات الطبيعية (NLP) لتحديد وتحليل العلاقات الدلالية بين كيانات الخوارزميات في الأوراق البحثية كاملة النص. تسير المنهجية عبر أربع مراحل رئيسية:
جمع البيانات والمعالجة المسبقة:
المتن (Corpus): تم جمع أوراق بحثية كاملة من ثلاث مؤتمرات كبرى في مجال معالجة اللغات الطبيعية (ACL، EMNLP، NAACL) نُشرت بين عامي 1979 و2025.
استخراج الكيانات: تم بناء متن تدريبي مُحدث عبر تعزيز البيانات الموجودة (1979–2020) بجمل تم وسمها يدوياً من الفترة 2021–2025. تم ضبط نموذج SciBERT + BiLSTM + CRF بدقة لاستخراج كيانات الخوارزميات وتصفية الجمل ذات الصلة.
التقييس (Standardization): طُبقت سلسلة معالجة صارمة للتقييس، شملت التقطيع (tokenization)، والرد إلى الأصل (lemmatization)، والتجميع القائم على المتجهات (باستخدام تضمينات Gemma وChromaDB) لدمج الأسماء المتغيرة لنفس الخوارزمية، مما نتج عنه مجموعة نهائية تضم 30,274 كياناً فريداً للخوارزميات.
إطار العمل والعلاقات والوسم:
تم تحديد إطار عمل للعلاقات الدلالية يتكون من ست فئات: يقارن مع (Compare with)، يستخدم (Use)، يتعاون مع (Cooperate with)، يماثل (Same as)، فئة أعلى من (Superclass of)، وأخرى (Other).
تم وسم متن ذهبي (gold-standard) مكون من 16,531 جملة تحتوي على كيانات خوارزمية متعددة يدوياً من قبل أربعة مسمّين، حيث حققوا اتفاقاً بين المسمّين (معامل كوهين كابا) قدره 0.7630.
تقييم النموذج لاستخراج العلاقات:
نماذج اللغات الكبيرة (LLMs): تم تقييم عدة نماذج (GPT-5، DeepSeek-Reasoner، Gemini-3.1-pro-preview، Claude-Sonnet-4-6) باستخدام استراتيجيات التلقين صفرية المحتوى (zero-shot)، وقليلة المحتوى (few-shot)، وسلسلة الأفكار (CoT).
نماذج اللغات المدربة مسبقاً (PLMs): تم إجراء ضبط دقيق تحت الإشراف لنماذج تشمل BERT وSciBERT وDeBERTa (مع وبدون طبقات BiLSTM). بالإضافة إلى ذلك، تم ضبط نماذج سلسلة Qwen باستخدام تقنية التكيف منخفض الرتبة (LoRA).
الاختيار: حقق SciBERT أفضل أداء وتم اختياره كنموذج نهائي لاستخراج العلاقات على نطاق واسع.
تحليل الشبكة:
تم حساب كثافة التفاعل بناءً على تكرار ظهور أزواج الخوارزميات في الأوراق البحثية بمرور الوقت، مع تطبيعها بالنسبة لإجمالي حجم المنشورات.
تم إنشاء شبكات علاقات سنوية لكل نوع من أنواع العلاقات لتحليل التطور من حيث حجم الشبكة (العقد/الحواف)، والاتصال الداخلي (متوسط الدرجة، معامل التكتل)، وديناميكيات التجدد (تشابه الحواف، الحواف الجديدة/المختفية).
النتائج الرئيسية
أداء النموذج: حقق SciBERT أعلى درجة (macro-F1) بلغت 77.79% لتحديد العلاقات، متفوقاً على نماذج اللغات الكبيرة الضبطت بدقة (مثل Qwen-8B التي حققت 75.60%) وعلى التلقين المباشر لنماذج اللغات الكبيرة. وبينما أظهرت نماذج اللغات الكبيرة نتائج تنافسية باستخدام التعلم قليل المحتوى واستدلال سلسلة الأفكار (على سبيل المثال، وصل GPT إلى 74.63% F1)، إلا أنها لم تتفوق على النموذج المتخصص (PLM) الذي تم ضبطه بدقة.
توزيع العلاقات: تهيمن علاقة المقارنة (Compare)، حيث تمثل 54.37% من جميع العلاقات الدلالية المحددة. تليها علاقة المماثلة (Synonym) بنسبة 12.54% والاستخدام (Use) بنسبة 10.67%، بينما كانت علاقة التعاون (Collaborate) هي الأقل تكراراً بنسبة 5.68%.
أنماط التفاعل:
تعكس الأزواج ذات الكثافة العالية غالباً التكتل التكنولوجي (مثل BERT–RoBERTa، GPT-3.5–GPT-4).
تتضمن علاقات المقارنة كلاً من المنافسة داخل الفئة الواحدة (مثل BERT مقابل RoBERTa) والمقارنات بين النماذج المختلفة (مثل BERT مقابل ELMo).
تكشف علاقات الفئة الأعلى (Superclass) عن هياكل هرمية، لا سيما في سلالة النماذج المدربة مسبقاً ومتغيراتها.
تطور الشبكة:
انتقلت جميع شبكات العلاقات من التشتت إلى التوسع منذ عام 2000.
تظهر شبكة المقارنة النمو الأسرع في العقد والحواف، وأعلى متوسط درجة، وأعلى معامل تكتل، مما يشير إلى نظام بيئي تنافسي يزداد عمقاً وكثافة.
تظهر الشبكات ديناميكيات تجدد عالية (دخول واختفاء كبير للحواف)، مما يشير إلى أن علاقات الخوارزميات ليست تراكمات ثابتة بل أنظمة ديناميكية. ومع ذلك، تظهر شبكة المقارنة استقراراً أكبر في الاحتفاظ بالحواف مقارنة بشبكات الاستخدام أو التعاون.
الأهمية والادعاءات يزعم المؤلفون أن هذه الدراسة توفر تحولاً حاسماً من مجرد تحديد الكيانات المنعزلة إلى تحديد العلاقات الهيكلية، مما يقدم أساساً جديداً لاستكشاف أنماط تنظيم المعرفة وتطورها في البحث العلمي. ومن خلال بناء شبكات خاصة بكل علاقة، تكشف الدراسة أن مجال معالجة اللغات الطبيعية يتميز بنظام بيئي تزداد فيه حدة المنافسة بين الخوارزميات، مدفوعاً بشكل كبير باختبارات الأداء واستبدال المنهجيات.
تفترض الدراسة أن هيمنة علاقة المقارنة لا تعكس التنافس التكنولوجي فحسب، بل تعكس أيضاً ممارسات البحث المتطورة، وتقاليد الكتابة، ومنطق التقييم في المجتمع الأكاديمي (مثل ضرورة المقارنات المرجعية الأساسية). توفر الدراسة موارد بيانات ومراجع منهجية لبناء رسوم بيانية للمعرفة بين كيانات الخوارقات، رغم أن المؤلفين أشاروا بتواضع إلى قيود تتعلق بنطاق البيانات (مؤتمرات معالجة اللغات الطبيعية فقط) والحاجة إلى مزيد من الصقل في طرق تمييز الكيانات وتصنيف العلاقات.