Intrinsic predictability rather than urban structure governs machine learning forecast skill for electricity demand
تجادل هذه الورقة بأن مهارة التنبؤ لنماذج تعلم الآلة للطلب على الكهرباء في المناطق الحضرية تتحدد أساساً من خلال القدرة الجوهرية للتنبؤ بأنماط الأحمال التاريخية للمدينة (وتحديداً التباين الموسمي والحساسية لدرجة الحرارة) بدلاً من الخصائص الهيكلية للمدينة أو موقعها الجغرافي.
تتجه المدن بشكل متزايد نحو الذكاء الاصطناعي لإدارة احتياجاتها من الكهرباء، آملةً أن تتمكن الخوارزميات الذكية من التنبؤ بدقة بحجم الطاقة التي سيستخدمها الناس في الشهر المقبل. إن هذا الوعد بالدقة يقع في قلب التخطيط الحضري الحديث، حيث يتعين على المسؤولين موازنة الشبكة، وخفض التكاليف، وتقليل الانبعاثات. يبدو المنطق بسيطاً: إذا استطاع الحاسوب التنبؤ بالطلب بدقة، فإن ذلك يثبت أن نظام الطاقة في المدينة مفهوم جيداً؛ أما إذا فشل التنبؤ، فذلك يشير إلى وجود شيء خفي أو معطل يحدث داخل البنية التحتية أو السلوك الخاص بتلك المدينة تحديداً. وقد دفع هذا الافتراض موجة من الاستثمار في أدوات تعلم الآلة للإدارة العامة، حيث تُعامل أخطاء التنبؤ كإشارات مباشرة لمشاكل محلية تحتاج إلى إصلاح. ومع ذلك، فإن هذا النهج يقوم على اعتقاد جوههي، وغالباً ما يُغفل فحصه، وهو أن قدرة النموذج على التنبؤ بالمستقبل تعتمد على الهيكل الفريد للمدينة نفسها.
تتحدى دراسة جديدة هذا الاعتقاد الجوهري من خلال النظر في الطلب على الكهرباء عبر ست وأربعين مدينة كبيرة في الولايات المتحدة. لم يقم الباحثون، بقيادة مهيار حسني وزملاؤه، ببناء محرك تنبؤ أفضل فحسب؛ بل بنوا أداة تشخيصية لاختبار ما إذا كان نجاح المحرك أو فشله يخبرنا بأي شيء عن المدينة بالفعل. لقد حللوا بيانات الكهرباء الشهرية لمدة اثني عشر عاماً، من عام 2007 إلى عام 2018، مع تطبيق منهجية اختبار صارمة تمنع الحاسوب من استخدام بيانات مستقبلية. كان هدفهم هو معرفة ما إذا كانت دقة التنبؤات تتباين بسبب حجم المدينة، أو ثرائها، أو كيفية ترتيب مبانيها، أم أن التباين يأتي من شيء آخر تماماً.
كانت النتائج مفاجئة. وجدت الدراسة أن مهارة نموذج تعلم الآلة لم يكن لها علاقة تذكر بحجم المدينة، أو عدد سكانها، أو التخطيط الحضري الخاص بها. فلم تكن المدينة التي يسكنها مليون نسمة أسهل أو أصعب بطبيعتها في التنبؤ من مدينة يسكنها ربع مليون نسمة. بدلاً من ذلك، كانت القدرة على التنبؤ بالطلب محكومة بالكامل بتاريخ استهلاك الكهرباء الخاص بالمدينة، وتحديداً بنمطين بسيطين: مدى قوة اتباع الطلب للمواسم، ومدى تتبعه لدرجة الحرارة. فالمدن ذات الإيقاع الموسمي القوي في التدفئة شتاءً والتبريد صيفاً كانت سهلة التنبؤ، بغض النظر عما إذا كانت في الصحراء أو في الغرب الأوسط. أما المدن ذات المناخ المعتدل، حيث لا تتغير حالة الطقولة واستهلاك الكهرباء بشكل حاد من شهر لآخر، فقد كانت أصعب في التنبؤ. ووجد الباحثون أن هذين العاملين — الإيقاع الموسمي والحساسية لدرجة الحرارة — قد فسرا جميع الاختلافات في دقة التنبؤ بين المدن تقريباً.
وللوصول إلى هذا الاستنتاج، توجب على الفريق تجريد عدة طبقات من الارتباك المحتمل. فقد قارنوا نماذج تعلم الآلة المتقدمة الخاصة بهم بقاعدة بسيطة جداً: وهي افتراض أن استهلاك الكهرباء في الشهر المقبل سيكون هو نفسه في نفس الشهر من العام الماضي. وفي ما يقرب من نصف المدن، كان أداء هذه القاعدة "الموسمية الساذجة" البسيطة يضاهي أداء الذكاء الاصطناعي المعقد. وفي بعض الحالات، كانت القاعدة البسيطة أفضل فعلياً. وقد أظهر هذا أن "الإشارة" الخاصة بالمواسم في العديد من المدن كانت قوية جداً لدرجة أن أي قدر من قوة الحاسوب لن يضيف قيمة تذكر. وبالنسبة للمدن التي تفوقت فيها النماذج المعقدة، كان التحسن غالباً هامشياً. لقد أثبتت الدراسة أنه عندما يفشل نموذج في التنبؤ بطلب مدينة ما، فذلك نادراً ما يكون بسبب كون المدينة فوضوية أو سيئة الإدارة، بل يعود الفشل عادةً إلى أن استهلاك المدينة يفتقر ببساطة إلى نمط قوي يمكن التنبؤ به منذ البداية.
كما كشف الباحثون عن خطر خفي في كيفية التعامل مع البيانات. فقد أظهروا أن ممارسة روتينية شائعة تتمثل في ملء نقاط البيانات المفقودة بقيمة مكررة يمكن أن تخلق نمطاً جغرافياً زائفاً. فإذا صادف أن بعض المدن كانت لديها بيانات مفقودة تم ملؤها بهذه الطريقة، فستبدو النماذج فجأة وكأنها تفشل في منطقة معينة، مما يخلق وهماً بوجود مشكلة إقليمية حيث لا توجد واحدة في الواقع. وتعد هذه النتيجة تحذيراً صارخاً: ما يبدو كبصيرة عميقة في الحوكمة الحضرية قد يكون مجرد أثر ناتج عن كيفية تنظيف الأرقام. ومن خلال التحكم في هذه العيوب في البيانات والقدرة المتأصلة للطلب، وجدت الدراسة عدم وجود دليل على أن مهارة التنبؤ تتجمع حسب المنطقة أو أنها تكشف عن إخفاقات محلية خفية.
إن الخلاصة العملية لمسؤولي المدن هي تغيير طريقة تفسيرهم لهذه التنبؤات. فالتنبؤ السيئ ليس، في حد ذاته، دليلاً على نظام معطل أو أزمة محلية خفية تستحق التحقيق. بل يصبح دليلاً على مشكلة فقط بعد مراعاة القدرة المتأصلة للمدينة على التنبؤ. فإذا كانت لدى المدينة نمط طلب مسطح وغير موسمي، فإن درجة التنبؤ المنخفضة هي أمر متوقع ولا تخبر المسؤول بشيء جديد. أما إذا كانت المدينة تمتلك نمطاً موسمياً قوياً ومع ذلك فشل النموذج، فهنا يجب أن يدق ناقوس الخطر. وتقترح الدراسة أنه قبل إنفاق الأموال على عمليات التدقيق أو البرامج الجديدة لإصلاح التنبؤات "السيئة"، يجب على الإداريين أولاً التحقق مما إذا كان تاريخ الطلب في المدينة يسمح بتنبؤ جيد. ومن خلال التركيز على الطبيعة الجوهرية للبيانات بدلاً من تعقيد الخوارزمية، يمكن للمسؤولين العموميين تجنب مطاردة الأشباح والتركة على المدن والأنظمة التي توجد فيها مشاكل حقيقية بالفعل.
ملخص تقني: القدرة التنبؤية الجوهرية، لا البنية الحضرية، هي ما يحكم مهارة التنبؤ بالتعلم الآلي للطلب على الكهرباء
بيان المشكلة يعتمد الإداريون العموميون بشكل متزايد على تنبؤات التعلم الآلي (ML) للطلب الحضري على الطاقة لتوجيه السياسات وتخطيط البنية التحتية. ومع ذلك، توجد فجوة حرجة في فهم متى يكون أداء التنبؤ بمثابة دليل صالح حول المدينة التي يصفها، مقابل متى يكون مجرد انعكاس لمحدودية الخوارزمية أو لخصائص البيانات المتأصلة. غالبًا ما تتعامل المنهجيات التقليدية مع الفشل التنبئي كتشخيص مباشر للديناميكيات الحضرية المحلية غير المنمذجة (مثل عدم كفاءة الحوكمة أو الشذوذ الهيكلي). تجادل هذه الورقة بأن مثل هذه التفسيرات تكون خاطئة في كثير من الأحيان لأنها تفشل في مراعاة "القدرة التنبؤية الجوهرية" — وهي السقف النظري لمهارة التنبؤ الذي تفرضه نسبة الإشارة إلى الضوضاء والبنية الزمنية لسلسلة الطلب نفسها. وبدون التحكم في هذا السقف، لا يمكن التمييز بين دقة التنبؤ المنخفضة وبين ضوضاء العمليات غير القابلة للاختزال، مما يؤدي إلى سوء تخصيص موارد التدقيق وتقديم تشخيصات سياساتية خاطئة.
المنهجية: إطار تعلم السياسات يقترح المؤلفون "إطار تعلم السياسات" الذي يعيد تفسير نماذج التعلم الآلي ليس فقط كأدوات تنبؤية، بل كأدوات تشخيصية للاكتشاف النسقي. تستخدم المنهجية بروتوكولاً تشخيصياً ذا مرحلتين تم تطبيقه على الطلب الشهري للكهاء السكنية في 46 مدينة كبيرة في الولايات المتحدة (2007-2018).
البيانات والميزات: تستخدم الدراسة لوحة حضرية متوازنة (Obringer et al) تحتوي على 12 عامًا من البيانات الشهرية. تتضمن مجموعة الميزات 26 متغيرًا مسبقًا (ex-ante): ترميزات مثلثية للموسمية، متغيرات ديموغرافية واجتماعية (السكان)، متغيرات أرصاد جوية آنية ومتأخرة (درجة الحرارة، الهطول، الرطوبة، إلخ)، وفترات إبطاء ذاتية (autoregressive lags) لاستهلاك الكهرباء والمياه.
بروتوكول "المشي للأمام" المدقق من التسريب: لضمان الصلاحية الزمنية ومنع تسريب البيانات، طبق المؤلفون التحقق المتقاطع بنظام النافذة الموسعة "Walk-Forward". يتم تدريب النماذج على 72 شهرًا أولية والتنبؤ بشهر واحد للأمام، مع تحديث مجموعة التدريب بشكل تكراري. ومن الأهمية بمكان أن البروتوكول يتضمن حواجز جبرية لمنع تسريب الهدف (على سبيل المثال، ضمان أن المتوسطات المتحركة لا تعيد بناء الهدف رياضياً) وفصلاً صارماً بين مقاييس (scalers) التدريب والاختبار.
محرك التنبؤ: المحرك الأساسي هو XGBoost، الذي تم تقييمه مقابل "سلم نموذجي" مكون من سبع فئات: الموسمية الساذجة (seasonal-naïve)، المربعات الصغرى العادية (OLS)، الغابة العشوائية (Random Forest)، تعزيز التدرج (Gradient Boosting)، CatBoost (مع وبدون التعزيز المرتب)، وLSTM عالمي بأسلوب DeepAR.
بطاقة الأداء التشخيصي: بدلاً من الدقة الخام، تولد المنهجية بطاقة أداء تشخيصية لكل مدينة. تقارن هذه البطاقة المهارة الفعلية خارج العينة (R2) مقابل:
خط الأساس الموسمي الساذج.
تقدير مسبق (ex-ante) لـ القدرة التنبؤية الجوهرية، المستمد من حصة الموسمية في تباين الحمل وحساسية درجة الحرارة، والمحسوب حصريًا بناءً على البيانات التاريخية ما قبل التنبؤ.
التحليل المقطعي والمكاني: تقوم الدراسة بعمل انحدار لمهارة التنبؤ مقابل مقاييس القدرة التنبؤية الجوهرية ومجموعة من المتغيرات الحضرية (الحجم، المورفولوجيا، العوامل الاجتماعية والاقتصادية). كما تم اختبار الارتباط الذاتي المكاني باستخدام Global Moran's I عبر تسعة مصفوفات أوزان مختلفة لتحديد ما إذا كانت مهارة التنبؤ تظهر تكتلاً جغرافيًا مستقلاً عن المناخ.
النتائج الرئيسية
هيمنة القدرة التنبؤية الجوهرية: تتباين مهارة التنبؤ بشكل واسع عبر المدن (من R2≈0.27 إلى $0.97$). ومع ذلك، فإن هذا التباين مفسر بالكامل تقريبًا من خلال خاصيتين مسبقتين (ex-ante) لتاريخ الطلب: حصة الموسمية في تباين الحمل، وحساسية الحمل لدرجة الحرارة. معًا، تفسر هاتان الخاصيتان R2 معدل قدره 0.454 في تفسير الاختلافات في المهارة بين المدن.
عدم صلة البنية الحضرية: خلافًا للفرضية التي تقول إن المورفولوجيا الحضرية أو الحوكمة تقود القدرة على التنبؤ، لا يظهر حجم المدينة (السكان) أي ارتباط بالمهارة (r=+0.017,p=0.91). كما أن إضافة المتغيرات الاجتماعية والاقتصادية عالية الأبعاد (الفئة B) لم تقدم أي قيمة تنبؤية هامشية وأظهرت علامات على الإفراط في التخصيص (overfitting).
الفرضية المكانية الصفرية: بمجرد التحكم في القدرة التنبؤية الجوهرية والمناخ الحراري، لا تظهر مهارة التنبؤ أي ارتباط ذاتي مكاني متبقٍ عبر أي من تعريفات الأوزان التسعة. الأنماط الجغرافية في المهارة الخام مفسرة بالكامل بسلاسة المناخ، وليس بالتنسيق الإقليمي أو التشابه الهيكلي.
أداء النماذج: محرك XGBoost المعقد (R2=0.760) يتفوق على القاعدة الموسمية الساذجة (R2=0.740) في 28 مدينة فقط من أصل 46. حقق CatBoost أعلى متوسط R2 (0.791)، لكن المكاسب الهامشية مقارنة بالنماذج التجميعية الأبسط كانت صغيرة ولم تكن ذات دلالة إحصائية في جميع المدن.
الآثار الناجمة عن معالجة البيانات: كشفت تجربة عاملية أن خيارات معالجة البيانات الروتينية يمكن أن تصنع أنماطًا جغرافية زائفة. وتحديدًا، أدى استخدام "الملء الثابت" (constant-fill) للقيم المفقودة (وهو اختصار شائع) إلى خلق تكتل مكاني كبير لفشل التنبؤ في مدن الغرب الأوسط، بينما لم يفعل النهج الصحيح (الحذف القائم على القائمة/listwise deletion) ذلك. وبالمثل، أدى تسريب الهدف عبر المتوسطات المتحركة التي تتضمن القيم السابقة إلى تضخيم الدقة عالميًا، لكنه لم يخلق آثارًا مكانية.
الأهمية والادعاءات تدعي الورقة وضع "قاعدة توقف" لحوكمة الطاقة الحضرية: الفشل التنبئي يكون معلوماتيًا حول الحوكمة فقط بمجرد التحكم في القدرة التنبؤية الجوهرية.
التحول الإبستمولوجي: تعيد الدراسة تأطير التنبؤ من عملية تأكيد إلى عملية تفنيد بوبرية (Popperian falsification). الـ R2 المنخفض ليس دليلًا على مدينة معطلة أو حوكمة سيئة؛ بل هو غالبًا خاصية لضوضاء الإشارة المتأصلة. فقط العجز الكبير مقارنة بسقف القدرة التنبؤية الجوهرية يشكل "فشلاً معلوماتيًا" يستوجب التحقيق في الديناميكيات المحلية غير المنمذجة.
الآثار السياساتية: يجب على الإداريين العموميين عدم تكليف عمليات تدقيق أو تدخلات بناءً فقط على ضعف أداء التنبؤ. بدلاً من ذلك، يجب عليهم أولاً تقييم القدرة التنبؤية الجوهرية للمدينة. بالنسبة للمدن ذات الإشارات الموسمية المنخفضة (مثل المدن الساحلية ذات المناخ المعتدل)، فإن مهارة التنبؤ المنخفضة أمر متوقع ولا يعني وجود مشاكل هيكلية كامنة.
المساهمة المنهجية: تسلط الورقة الضوء على "أزمة إعادة الإنتاج" في التحليلات الحضرية، موضحة كيف يمكن لممارسات معالجة البيانات القياسية (التعويض، مناطق المرافق المكررة، التسريب) أن تولد أنماطًا جغرافية مقنعة ولكنها زائفة تمامًا. تعمل "بطاقة الأداء التشخيصي" المقترحة كـ "شيء وسيط" (boundary object)، حيث تترجم مخرجات النماذج المعقدة إلى إرشادات شفافة وغير ضارة لصناع السياسات من خلال الإبلاغ الصريح عن عدم اليقين، والمعايير المرجعية، وسقوف القدرة التنبؤية.
في الختام، يؤكد المؤلفون أن التباين في مهارة التنبؤ بالتعلم الآلي للطلب على الكهرباء تحكمه الخصائص الإحصائية الجوهرية لسلسلة الطلب، وليس البنية الحضرية للمدينة. وهذا يتطلب تحولًا في كيفية تقييم واستخدام النماذج التنبؤية في الإدارة العامة، مع إعطاء الأولوية للدقة التشخيصية على الدقة الخام.