The Political Ideology of Large Language Models: Measurement, Inconsistency, and Persuasive Influence
تحدياً للرؤية القائلة بأن النماذج اللغوية الكبيرة لا تمتلك سوى انحيازات سياسية طفيفة، تُظهر هذه الدراسة أنه بينما يبدو تموضعها العام معتدلاً بسبب المواقف الحزبية المتعارضة بشأن موضوعات محددة، إلا أنها يمكنها مع ذلك ممارسة تأثير إقناعي على المواقف السياسية للمستخدمين يضاهي الإعلانات الحملاتية الاحترافية، لا سيما عندما يتم توجيه استجاباتها بشكل صريح.
في مشهد السياسة الحديثة، نادراً ما تكون أيديولوجية الشخص عبارة عن كتلة واحدة صلبة من المعتقدات. بدلاً من ذلك، هي مجموعة من الآراء حول قضاหลาย مواضيع مختلفة، من الرعاية الصحية إلى الهجرة، والتي يمكن أن تسحب أحياناً في اتجاهات متضاربة. لقد أدرك علماء السياسة منذ زمن طويل أن معظم الناس لا يتبنون آراء متسقة تماماً؛ فقد يكون الناخب ليبرالياً جداً في موضوع ما ومحافظاً جداً في موضوع آخر، أو قد لا يملك ببساطة رأياً قوياً على الإطلاق. ولعقود من الزمن، قام الباحثون بقياس هذه المواقف من خلال سؤال الناس عما سيصوتون عليه في القوانب أو كيف يشعرون تجاه سياسات معينة، مما يرسم خريطة لمواقف الأفراد. والآن، برز سؤال جديد مع تحول نماذج اللغات الكبيرة إلى أداة يومية للملايين: هل تمتلك نماذج اللغات الكبيرة التي نتحدث إليها كل يوم خرائط سياسية خاصة بها؟ إذا كانت هذه النماذج، التي تُستخدم بشكل متزايد للعثور على المعلومات وتشكيل الآراء، تحمل انحيازات خفية، فقد تشكل ببراعة طريقة رؤية الناس للعالم دون أن يدرك أحد ذلك.
لقد وضع فريق من الباحثين هدفاً للإجابة على هذا السؤال من خلال التعامل مع الذكاء الاصطناعي ليس كآلة حاسبة محايدة، بل كفاعل سياسي. فقاموا بفحص ثلاثة وأربعين نموذجاً مختلفاً من نماذج اللغات الكبيرة، وطلبوا من كل منها أن يلعب دور عضو في الكونغرس الأمريكي، أو قاضٍ في المحكمة العليا، أو ناخب عادي. لم يطلبوا من النماذج مجرد ذكر معتقداتها؛ بل طلبوا منها اتخاذ قرارات بشأن مشاريع قوانين وقضايا محاكم وأسئلة استقصائية واقعية، تماماً كما يفعل البشر. ثم قارن الباحثون هذه القرارات الرقمية بسجلات التصويت الفعلية للسياسيين الحقيقيين وإجابات الاستطلاع لآلاف الأمريكيين الحقيقيين. وما وجدوه هو أن هذه النماذج لا تقبع في منطقة وسطى هادئة ومحايدة. بدلاً من ذلك، تظهر مزيجاً معقداً ومتناقضاً في كثير من الأحيان من الآراء. ففي بعض القضايا، قد يتخذ نموذج واحد موقفاً أكثر ليبرالية من أقوى الديمقراطيين، بينما في قضايا أخرى، قد يتخذ نفس النموذج موقفاً أكثر محافظة من أقوى الجمهوريين. وعندما تجمع متوسط كل هذه الآراء معاً، تظهر النماذج غالباً كمعتدلة، لكن هذا وهم ناتج عن إلغاء الآراء القوية والمتضاربة، تماماً مثل ناخب حقيقي يحمل مزيجاً من الآراء المتضاربة.
كما بحثت الدراسة في مصدر هذه الآراء. واكتشف الباحثون أن الميول السياسية لهذه النماذج ليست مجرد انعكاس للنصوص الهائلة التي تدربت عليها. بدلاً من ذلك، فإن التعليمات المحددة وفلاتر السلامة المطبقة على النماذج بعد تدريبها الأولي — وهي عمليات مصممة لجعلها مفيدة وغير ضارة — هي ما يدفعها نحو جوانب سياسية معينة. في الواقع، عندما اختبر الباحثون النسخ "الخام" من هذه النماذج قبل هذه التعديلات النهائية، كانت النماذج أقرب بكما إلى المركز السياسي. إن عملية الضبط النهائي هي ما يمنحها بصمتها السياسية المتميزة، والتي تميل غالاً نحو الليبرالية. وهذه البصمة ليست مجرد قائمة ثابتة من الآراء؛ بل تتغير بناءً على كيفية توجيه الطلب للنموذج. فعندما يتم توجيهها للقيام بدور ناخب، أو قاضٍ، أو مشرع، تعبر النماذج عن مجموعات مختلفة من المواقف، مما يظهر أن "أيديولوجيتها" هي سلوك تؤديه استجابةً للأمر، وليست نظام معتقدات عميق الجذور.
ومع ذلك، كان الجزء الأكثر أهمية في البحث هو معرفة ما إذا كان بإمكان هذه الآراء الرقمية تغيير عقول الناس الحقيقيين. فقد أجرى الباحثون تجربة واسعة حيث ناقش آلاف المشاركين الأمريكيين قضايا السياسة مع هذه النماذج. واختبروا سيناريوهين مختلفين. في الأول، سُمح للنماذج بالتحدث بشكل طبيعي، والإجابة على الأسئلة دون إخبارها بالدفاع عن وجهة نظر محددة. وفي الثاني، تم توجيه النماذج صراحةً للمرافعة عن وجهة نظر معينة، مثل دعم قانون جديد للحد من انتشار الأسلحة أو معارضة زيادة الضرائب. كانت النتائج مذهلة. فعندما تحدثت النماذج بشكل طبيعي، لم يكن لها أي تأثير ملموس على آراء المشاركين؛ فلم يتغير توجه الأشخاص الذين تحدثوا معها في أي اتجاه. ومع ذلك، عندما أُمرت النماذج بالمرافعة عن جانب معين، أصبحت مقنعة للغاية. فالمشاركون الذين تحدثوا مع نموذج تم توجيهه للمرافعة عن سياسة معينة غيروا آراءهم لتتماشى مع ذلك النموذج بمتوسط يزيد عن عشر نقاط مئوية. وكان هذا التأثير قوياً بما يكفي ليتساوى مع الحملات الإعلانية السياسية الاحترافية، بل ويتجاوزها في بعض الحالات.
وعلى نحو حاسم، وجدت الدراسة أن القدرة على الإقناع هذه لم تكن تعتمد على خلفية الشخص. فلم يهم ما إذا كان المشارك عالماً أو متابعاً للأخبار بدقة أو خبيراً جداً في الذكاء الاصطناعي؛ فقد كان التأثير قوياً على الجميع بغض النظر عن هذه العوامل. ومع ذلك، فإن اتجاه الحجة بالنسبة لحزب المشارك نفسه كان مهماً بطريقة مفاجئة. فقد وجد الباحثون أن المشاركين كانوا أقل عرضة لتغيير آرائهم عندما جادل النموذج ضد حزبهم السياسي، وأكثر عرضة للتغيير عندما جادل النموذج بما يتماشى مع حزبهم. كما استبعد الباحثون فكرة أن النماذج كانت ببساطة توافق المستخدم على ما يفكر فيه بالفعل. لأن النماذج تم توجيهها للمرافعة لصالح جانب محدد قبل بدء المحادثة، ولأن المستخدمين لم يخبروا النماذج بآرائهم مسبقاً، لم يكن بإمكان النماذج محاكاة المستخدم. بدلاً من ذلك، كانت النماذج تؤثر حقاً في المحادثة.
تشير النتائج إلى أنه بينما قد تبدو أدوات الذكاء الاصطنا هذه كمصادر محايدة للمعلومات عندما تُترك لشأنها، إلا أنها تمتلك قدرة خفية على تشكيل الرأي السياسي عندما يتم توجيهها للقيام بذلك. ويؤكد الباحثون أن هذا التأثير ليس نتيجة امتلاك النماذج لروح أو أجندة سياسية خاصة بها، بل هو نتيجة لكيفية بنائها وتوجيهها. فإذا أرادت حكومة أو شركة التأثير على الرأي العام، فهي لا تحتاج إلى إنشاء آلة دعاية؛ بل تحتاج ببساطة إلى تعديل التعليمات المعطاة للنماذج التي يستخدمها الملايين بالفعل. وتخلص الدراسة إلى أنه مع تغلغل هذه الأدوات في حياتنا اليومية، من محركات البحث إلى المساعدين الشخصيين، سيكون للطريقة التي يتم ضبطها بها عواقب عميقة على كيفية فهمنا للعالم وكيفية تصويتنا. إن القدرة على تغيير عقل الشخص لم تعد حكراً على المتحدثين البشر؛ بل يمكن الآن ترميزها في البرمجيات التي نتحدث إليها كل يوم.
ملخص تقني: الأيديولوجية السياسية للنماذج اللغوية الكبيرة
بيان المشكلة تتزايد أهمية النماذج اللغوية الكبيرة (LLMs) في استرجاع المعلومات واتخاذ القرار، مما يثير مخاوف بشأن التحيزات السياسية المتأصلة فيها. غالبًا ما تكتفي الأدبيات الحالية بفحص التحيز في هذه النماذج عبر سؤالها أسئلة استقصائية سياسية، وتخلص غالبًا إلى أن النماذج "معتدلة" أو تميل قليلاً نحو اليسار. ومع ذلك، يرى المؤلفون أن هذا الإجماع يعاني من فجوتين حرجتين:
محدودية القياس: غالبًا ما تعامل الدراسات السابقة "التحيز السياسي" كونه انحرافًا عن خط أساس محايد، وهو مفهوم غير محدد بدقة في العلوم السياسية. علاوة على ذلك، فإنها تفشل في مراعاة الفارق الدقيق المتمثل في أن "الاعتدال" قد يتجلى في صورة مزيج من الآراء الحزبية القوية والمتعارضة، بدلًا من كونه آراءً مركزية حقيقية.
نقص الأدلة السببية: بينما تفترض الأدبيات أن النماذح اللغوية الكبيرة تؤثر على المستخدمين، فإن دراسات قليلة تختبر تجريبيًا ما إذا كانت المواقف الأيديولوجية التي تعبر عنها هذه النماذج تترجم بالفعل إلى تأثير إقناعي على المواقف السياسية، لا سيما في التفاعلات الطبيعية أو "غير الموجهة".
المنهجية تعتمد الدراسة نهجًا ثنائي المسار يجمع بين أساليب القياس في العلوم السياسية وتجربة مسحية عشوائية مسجلة مسبقًا.
القياس الأيديولوجي (القياس):
مصادر البيانات: أنشأ المؤلفون مجموعة بيانات متوافقة تقارن بين 43 نموذجًا لغويًا كبيرًا مقابل ثلاث مرجعيات بشرية: 1,327 من المشرعين الفيدراليين الأمريكيين (الكونجرس من الدورة 110 إلى 119)، و16 من قضاة المحكمة العليا (2006–2026)، و60,000 من الناخبين الأمريكيين من دراسة الانتخابات التعاونية (CES) لعامي 2022 و2024.
الإجراء: طُلب من النماذج اللغوية الكبيرة تقمص أدوار محددة (ناخب، قاضٍ، مشرع) والاستجابة لنفس مشاريع القوانين، وقضايا المحاكم، وأسئلة الاستطلاع التي خضعت لها المجموعات البشرية.
التحليل: استخدم المؤلفون نموذج W-NOMINATE للمشرعين، ونماذج Bayesian IRT للقضاة، وتحليل المكونات الرئيسية (PCA) للناخبين لرسم خرائط استجابات النماذج اللغوية الكبيرة على الأبعاد الأيديولوجية الراسخة. كما حللوا "عدم الاتساق الأيديولوجي" (التباين في الاستجابات عبر القضايا المختلفة) لتحديد ما إذا كانت النماذج تتصرف كأطراف حزبية متسقة أم كـ "معتدلين".
اختبارات المتانة: اختبرت الدراسة الحساسية تجاه صياغة الأوامر (مثل إزالة تعليمات تقمص الأدوار) وقارنت بين النماذج "الأساسية" (المُدربة مسبقًا) والنماذج "الموجهة" (التي خضعت لضبط دقيق باستخدام التعلم التعزيزي من التغذية الراجعة البشرية RLHF) لعزل مصدر البصمات الحزبية.
تجربة الإقناع:
التصميم: تجربة عشوائية داخل المجموعات، مسجلة مسبقًا، شملت 1,523 مشاركًا أمريكيًا.
الحالات: ناقش المشاركون أربعة مواضيع سياساتية (التحكم في الأسلحة، الهجرة، الشرطة، الضرائب) مع نموذج لغوي كبير تحت ست حالات:
التوجيه الصريح: تم توجيه النموذج للمجادلة لصالح جانب محدد (ليبرالي أو محافظ) بناءً على نتائج القياس السابقة.
الأساسي (الطبيعي): ناقش النموذج الموضوع بشكل طبيعي دون تعليمات دفاع صريحة.
المحايد/الضبط: مطالبات متوازنة أو عدم وجود محادثة.
النتيجة: المقياس الأساسي كان ما إذا كان موقف المشارك بعد المحادثة يتوافق مع الموقف الأيديولوجي المقاس لهذا النموذج في ذلك الموضوع المحدد.
التحليل: استُخدم نموذج الانحداء اللوجستي ذو التأثيرات المختلطة لتقدير نسبة الأرجحية "نحو الطرف الذي يتم الدفاع عنه"، مع التحكم في العوامل الديموغرافية والمشاركة السياسية.
المساهمات الرئيسية
إعادة صياغة أيديولوجية النماذج اللغوية الكبيرة: تقدم الورقة تعريفًا سلوكيًا لأيديولوجية النماذج اللغوية الكبيرة، حيث تعاملها كنمط من المواقف المعلنة بدلًا من كونها معتقدات كامنة. وتوضح أن النماذج ليست معتدلة بشكل موحد؛ إذ غالبًا ما تحجب درجاتها "المعتدلة" الإجمالية تطرفات حزبية شديدة مرتبطة بمواضيع محددة.
مصدر التحيز: تحدد الدراسة أن البصمة الحزبية للنماذج اللغوية الكبيرة يتم إدخالها أو تضخيمها بشكل أساسي خلال مرحلة الضبط الدقيق للتعليمات (المواءمة/RLHF)، وليس نابعة من بيانات التدريب المسبق. تميل النماذج الأساسية إلى أن تكون أكثر مركزية، بينما تتحول النماذج الموجهة بشكل ملحوظ نحو المعايير الليبرالية.
آلية الإقناع: يقدم المؤلفون دليلًا سببيًا على أن النماذج اللغوية الكبيرة يمكنها تغيير المواقف السياسية، ولكن من المهم ملاحظة أن هذا التأثير مدفوع بالتوجيه الصريح. النماذج التي تتصرف بشكل طبيعي (بدون تعليمات دفاع صريحة) لم تظهر أي تأثير إقناعي يمكن اكتشافه في هذه الدراسة.
أدوات مفتوحة المص المصدر: أطلق المؤلفون منصة استطلاع جديدة مفتوحة المصدر مصممة لدمج النماذج اللغوية الكبيرة في تجارب العلوم الاجتماعية، مما يسهل الأبحاث المستقبلية حول التفاعل بين الإنسان والذكاء الاصطناائي.
النتائج الرئيسية
التنوع الأيديولوجي وعدم الاتساق:
مقارنة بالمشرعين الأمريكيين، تبدو النماذج اللغوية الكبيرة معتدلة في الحزبية الوطنية، لكنها أكثر ليبرالية بشكل ملحوظ في أبعاد الحقوق المدنية والعدالة الاجتماعية.
مقارنة بقضاة المحكمة العليا، معظم النماذج اللغوية الكبيرة معتدلة للغاية.
مقارنة بالناخبين، استقرت كل النماذج اللغية الكبيرة في العينة على الجانب الديمقراطي من البعد الكامن (درجة PCA سالبة). وبينما عبرت النماذج الأكثر ليبرالية عن مواقف أكثر ليبرالية من متوسط "الديمقراطي القوي"، فإن حتى أكثر النماذج محافظة في العينة كانت فقط أكثر محافظة بقليل من متوسط "الديمقراطي الضعيف".
عدم الاتساق: تُظهر النماذج اللغية الكبيرة مستويات من عدم الاتساق الأيديولوجي (التباين عبر القضايا) مشابهة للأطراف القوية والمطلعة، وليس "المعتدلين" الذين لا يتبنون آراء قوية. فهي غالبًا ما تحمل مواقف قوية متعارضة (مثل: ليبرالية في الرعاية الصحية، ومحافظة في قضاية الشرطة).
تأثيرات الإقناع:
التوجيه الصريح: عندما تم توجيه النماذج صراحة للمجادلة لصالح جانب ما، فقد غيرت مواقف المستخدمين بمتوسط 10.6 نقطة مئوية نحو ذلك الجانب. هذا الحجم من التأثير يضاهي أو يفوق الإعلانات السياسية الاحترافية.
التفاعل الطبيعي: عندما تناقشت النماذج بشكل طبيعي دون توجيه صريح، كان التأثير الإقناعي معدومًا (AME: -0.2 نقطة مئوية). واستبعد فاصل الثقة أصغر تأثير ذي دلالة حدده المؤلفون مسبقًا.
المتغيرات المعدلة: لم تجد الدراسة أي تباين معنوي بناءً على معرفة المستخدم بالنماذج اللغوية الكبيرة، أو استهلاك الأخبار، أو الاهتمام السياسي. الإشارة الوحيدة المتبقية للمتغير المعدل (الطرف الآخر من الحزبية) جاءت عكس التوقعات، حيث أظهرت أن أصحاب الحزبية المعارضة تحركوا أقل من أصحاب الحزبية المماثلة، وهي نتيجة أشار المؤلفون إلى ضرورة تكرار اختبارها.
الآلية: تستبعد النتائج "المداهنة" (محاكاة آراء المستخدم) كمحرك أساسي، حيث كان اتجاه الإقناع محددًا بواسطة مطالبة الباحث (المنظم)، وليس بموقف المستخدم السابق.
الأهمية والادعاءات تدعي الورقة أنه بينما قد لا تقنع النماذج اللغوية الكبيرة المستخدمين بطبيعتها في المحادثات المعلوماتية غير الموجهة، إلا أنها تمتلك قدرة كامنة على ممارسة تأثير سياسي كبير عندما يتم توجيه مخرجاتها للدفاع عن مواقف محددة. يرى المؤلفون أن وصف "المعتدل" الذي يُطلق غالبًا على النماذج اللغوية الكبيرة هو وصف مضلل؛ فهو نتيجة صافية لمواقف حزبية قوية ومتعارضة يمكن تفعيلها عبر أوامر (prompts) محددة.
تخلص الدراسة إلى أن النماذج اللغوية الكبيرة، وخاصة تلك التي تسيطر عليها كيانات خاصة أو حكومات، تمثل وسيلة قوية للتأثير السياسي المستهدف. وبما أن التأثير الإقناعي مدفوع بخيارات المواءمة الصريحة (أوامง النظام وRLHF)، فإن مطوري النماذج يمتلكون نفوذًا كبيرًا على المواقف الأيديولوجية التي تعبر عنها نماذجهم. ويحذر المؤلفون من أنه بينما قد تكون آثار المحادثة الواحدة زائلة، فإن التأثير التراكمي للتفاعلات المتكررة مع نماذج متحيزة في الأدوات اليومية (البحث، المساعدات الذكية) قد يتراكم بمرور الوقت، مما قد يعيد تشكيل الخطاب السياسي دون وعي من المستخدمين.
تحافظ الورقة على نبرة متواضعة فيما يتعلق بديمومة هذه التأثيرات، مشيرة إلى أن تجربتهم قامت بقياس التحولات الفورية في المواقف، بينما تظل ديمومة التأثير على المدى الطويل مسألة مفتوحة للبحوث المستقبلية.