Agent policies from higher-order causal functions
تُنشئ هذه الورقة علاقة رياضية بين سياسات الوكلاء في عمليات ماركوف لاتخاذ القرار تحت حالة عدم اليقين (POMDPs) ودوال العمليات من الرتب العليا، باستخدام نظرية الفئات لإثبات أن الوكلاء الذين يستخدمون هياكل سببية غير محددة يمكنهم التفوق على أولئك المقيدين بترتيبات سببية ثابتة في البيئات اللامركزية.
البحث الأصلي مرخَّص بموجب CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). هذا شرح مولَّده بالذكاء الاصطناعي للبحث أدناه. لم يكتبه المؤلفون ولم يصادقوا عليه. وللتحقق من الدقة التقنية، يرجى الرجوع إلى البحث الأصلي. اقرأ إخلاء المسؤولية الكامل
تخيل أنك تلعب لعبة فيديو. في معظم الألعاب، هناك "ترتيب عمليات" واضح: تضغط على زر (فعل)، تقوم اللعبة بحساب ما سيحدث (البيئة)، ثم ترى ما حدث على الشاشة (الملاحظة). هذا هو "السبب والنتيجة" المعياري الذي نعيش به.
تستكشف هذه الورقة البحثية، التي كتبها مات ويلسون، فكرةً تثير الذهن: ماذا لو لم يكن "ترتيب" السبب والنتيجة ثابتاً؟ ماذا لو استجابت اللعبة لحركتك حتى قبل أن تقوم بها، أو إذا كانت حركتك ورد فعل اللعبة يحدثان في حلقة متشابكة حيث لا يمكن لأحدهما حقاً أن يسبق الآخر؟
لشرح ذلك، تبني الورقة جسراً بين عالمين مختلفين تماماً: الذكاء الاصطناعي (AI) والفيزياء الكمومية.
1. العالمان
- عالم الذكاء الاصطناعي ("الوكيل"): فكر في وكيل الذكاء الاصطناعي كلاعب في لعبة. يمتلك اللاعب "ذاكرة" (ما حدث في الجولة الماضية) ويستخدمها ليقرر خطوته التالية. الهدف هو الحصول على أعلى درجة ممكنة.
- عالم الفيزياء ("العملية"): في أسس الفيزياء، يدرس العلماء "العمليات" — وهي قواعد كيفية تدفق المعلومات عبر الفضاء والزمن. عادةً، تتبع هذه القواعد جدولاً زمنياً صارماً (أ يسبب ب). لكن في العالم الكمومي، يمكن للأشياء أن تصبح "غير محددة"، مما يعني أن الترتيب السببي يكون غامضاً أو متداخلاً.
2. "الجسر" (الاكتشاف الجوهري)
الاختراق الكبير للمؤلف هو إثبات أن هذين العالمين يتحدثان في الواقع نفس اللغة الرياضية.
لقد أظهر أن استراتيجية الذكاء الاصطناعي (كيف يستخدم الذاكرة لاختيار الأفعال) هي متطابقة رياضياً مع العملية الفيزيائية (كيف تتدفق المعلومات عبر نظام ما).
التشبيه: الوصفة مقابل الطاهي
تخيل وصفة طعام (البيئة/POMDP) وطاهياً (الوكيل).
- في الذكاء الاصطناعي القياسي، يقرأ الطاهي الوصفة، يطبخ، يتذوق، ثم يقرر ما سيفعله بعد ذلك.
- تُظهر الورقة أن "أسلوب اتخاذ القرار لدى الطاهي" يمكن معاملته ككائن رياضي يمكن "دمجه" في الوصفة. ومن خلال معاملة الطاهي كـ "دالة من رتبة أعلى"، يمكننا دراسة كيفية تفاعل الطاهي والوصفة كنظام واحد معقد.
3. "القوة الخارقة": الترتيب السببي غير المحدد
هنا يصبح الأمر مثيراً للغاية. نظرًا لأن رياضيات الذكاء الاصطناعي ورياضيات الفيزياء هما الشيء نفسه، يتساءل المؤلف: "هل يمكن للذكاء الاصطناعي استخدام منطق 'نمط الكم' للفوز بالألعاب بشكل أفضل من الذكاء الاصطناعي العادي؟"
في لعبة عادية (ترتيب سببي محدد)، يقوم الوكيل (أ) بفعل ما، ثم يقوم الوكيل (ب) برد فعل تجاهه. إنه خط مستقيم.
في "لعبة نمط الكم" (ترتيب سببي غير محدد)، يعمل الوكلاء بطريقة تجعل أفعالهم "متشابكة". إنها أشبه بدائرة أو عقدة.
التشبيه: الرقص المتزامن
تخيل راقصين، أليس وبوب، يحاولان أداء حركة معقدة معاً.
- الذكاء الاصطناعي القياسي (ترتيب محدد): أليس تتحرك، ثم يستجيب بوب لحركتها. إذا لم يكونا متزامنين بدقة، فقد يفقدان الإيقاع.
- الذكاء الاصطناعي "الكمومي" (ترتيب غير محدد): تتحرك أليس وبوب بطريقة تجعل أفعالهما متشابكة بعمق بحيث لا يمكنك القول من منهما قاد ومن منهما تبع الآخر. إنهما في الأساس "يدوران" معلوماتهما في حلقة.
النتيجة: أثبت المؤلف ذلك باستخدام "لعبة" محددة (تسمى لعبة GYNI). وأظهر أن الذكاء الاصطناعي "العادي" عالق عند درجة قصوى (مثل حد السرعة)، لكن الذكاء الاصطناعي الذي يستخدم هذا المنطق "السببي غير المحدد" يمكنه بالفعل كسر هذا الحد وتحقيق درجة كاملة.
لماذا يهم هذا الأمر؟
- ذكاء اصطناعي أفضل: يشير هذا إلى أنه إذا أردنا بناء أنظمة ذكاء اصطنا- متعددة الوكلاء متقدمة حقاً (مثل سرب من الروبوتات التي تعمل معاً)، فلا ينبغي لنا فقط تعليمهم كيفية التفاعل مع بعضهم البعض؛ بل يجب تعليمهم كيفية استخدام هذه الاستراتيجيات السببية "المتشابكة".
- الحوسبة الكمومية: يوفر هذا خارطة طريق لـ "الذكاء الاصطناه الكمومي". فهو يعطينا طريقة رياضية لتصميم ذكاء اصطناعي مبني خصيصاً ليعمل على أجهزة الكمبيوتر الكمومية، مما قد يمنحهم ميزة هائلة في حل المشكلات المعقدة.
- فهم الواقع: يشير هذا إلى أن الطريقة التي يتفاعل بها "الوكلاء" (الكائنات الذكية) مع عالمهم قد تكون مرتبطة بعمق بالنسيج الأساسي لكيفية عمل الزمن والسببية في الكون.
غارق في أبحاث مجالك؟
تصلك نشرة يومية بأحدث الأبحاث المطابقة لكلماتك البحثية المفتاحية — مع ملخصات تقنية، بلغتك.