Sustainable Local RAG Architectures for Energy Governance: A Green AI Approach via Document Slice Contextualization
تقترح هذه الورقة بنية هندسية مستدامة ومحلية للجيل التوليدي لتعزيز الاسترجاع (RAG) باستخدام سياق شرائح المستندات ووكيل توجيه ثنائي الطبقات لتحقيق دقة استرجاع قريبة من الخط المرجعي مع تقليل استهلاك الطاقة والانبعاثات ووقت الاستدلال بشكل جذري للامتثال لحوكمة الطاقة.
المؤلفون الأصليون:Martin Tibor Sándor, Róbert Lakatos
في العالم الحديث، تغرق المؤسسات في بحر من الوثائق. فمن لوائح الطاقة إلى الأبحاث العلمية، تظل المعلومات اللازمة لاتخاذ قرارات حاسمة حبيسة آلاف الصفحات من النصوص. ولتحليل هذه البيانات، تتجه العديد من المؤسسات إلى الذكاء الاصطناعي، وتحديداً الأنظمة التي يمكنها قراءة وثيقة، وإيجاد الأجزاء ذات الصلة، والإجابة على الأسئلة بناءً عليها. وتعمل هذه العملية، المعروفة باسم "التوليد المعزز بالاسترجاع" (retrieval-augmented generation)، عن طريق تقسيم وثيقة طويلة إلى قطع أصغر، أو "أجزاء"، والطلب من نموذج حاسوبي تلخيص كل جزء قبل البحث عن الإجابات. ومع ذلك، ظهرت مشكلة كبيرة: وهي أن الطريقة الأكثر دقة للقيام بذلك تتطلب من الحاسوب قراءة الوثيقة بأكملها في كل مرة يلخص فيها جزءاً صغيراً. وهذا النهج يستهلك طاقة هائلة ويتطلب أجهزة حاسوبية قوية ومكلفة لا تستطيع معظم المكاتب المحلية تحمل تكلفتها. وبالنسبة لقطاعات مثل حوكمة الطاقة، حيث تفرض القوانين بقاء البيانات داخل الدولة وعدم إرسالها إلى خادم سحابي بعيد، فإن هذا يخلق عقبة رئيسية. فالتقنية موجودة، لكن تكلفة تشغيلها محلياً غالداً ما تكون باهظة، سواء من حيث استهلاك الكهرباء أو الذاكرة الفيزيائية للحاسوب.
وقد طور باحثون في جامعة دبرتسن في المجر طريقة جديدة لحل هذه المشكلة، مما يسمح لهذه الأدوات القوية من الذكاء الاصطناعي بالعمل بكفاءة على أجهزة الكمبيوتر المكتبية العادية. ويركز عملهم على تقنية تسمى "سياق شرائح الوثيقة" (Document Slice Contextualization). فبدلاً من إجبار الحاسوب على قراءة الوثيقة بأكملها لفهم فقرة واحدة، يقرر النظام الجديد بذكاء مقدار النص المحيط الذي يحتاه فعلياً. تخيل أميناً للمكتبة، بدلاً من أن يسلمك الموسوعة بأكملها لتجد تعريفاً ما، يفتح لك الصفحة المحددة والصفحات القليلة المجاورة لها فقط. لقد بنى الباحثون "وكيل توجيه ذكي" يعمل مثل هذا الأمين. فقبل تلخيص جزء من النص، يتحقق هذا الوكيل بسرعة مما إذا كان الجزء يشرح نفسه بنفسه، مثل الملخص أو الخاتمة، أو ما إذا كان يحتاج إلى مساعدة من جيرانه ليفهم السياق. فإذا كان الجزء يشرح نفسه، يتخطى النظام خطوة التلخيص تماماً. أما إذا كان يحتاج إلى سياق، فيقرر الوكيل بالضبط عدد الصفحات المجاورة التي يجب تضمينها، بدلاً من تضمين الكتاب بأكمله بشكل عشوائي.
اختبر الفريق هذا النهج على مجموعة من خمس وعشرين ورقة علمية وأربع وثائق سياسات معقدة من المفوضية الأوروبية. وقارنوا طريقة التوجيه الذكية الجديدة هذه بالنهج التقليدي الذي يقرأ الوثيقة بأكملها في كل مرة. وكانت النتائج مذهلة؛ فقد حقق النظام الجديد مستوى يقارب نفس دقة العثور على المعلومات الصحيحة التي حققها النهج الثقيل والمستهلك للطاقة، ولكنه فعل ذلك بجزء ضئيل من الجهد. وتحديداً، قلل النهج الجديد الطاقة المطلوبة لتوليد الإجابات بنسبة 87.6 بالمائة. ومن الناحية العملية، فإن مهمة كانت تستغرق سابقاً قرابة ساعة وتستهلك أكثر من 100 واط/ساعة من الكهرباء، اكتملت في أقل من تسع دقائق باستخدام 13.2 واط/ساعة فقط. كما أدى هذا الانخفاض أيضاً إلى انخفاض هائل في انبعاثات الكربون، حيث خفض الناتج من 21.8 جراماً من مكافئ ثاني أكسيد الكربون إلى 2.8 جراماً فقط.
وتتمثل إحدى النتائج الرئيسية للدراسة في أن وكيل التوجيه "الذكي" لم يوفر الطاقة فحسب، بل حسن أيضاً جودة البحث في بعض الجوانب. فمن خلال تخطي تلخيص الأجزاء التي كانت واضحة بالفعل، تجنب النظام إضافة "ضجيج" غير ضروري إلى عملية البحث، مما سمح للحاسوب بالعثور على المعلومات الأكثر صلة بشكل أسرع وأكثر دقة. وقد قاس الباحثون ذلك باستخدام اختبار قياسي لـ 250 سؤالاً صعباً تتطلب ربط المعلومات من أجزاء متعددة من الوثيقة. ووجد نظامهم الجديد الإجابات الصحيحة في 95.2 بالمائ المائة من الحالات، وهو رقم يكاد يتطابق مع نسبة 95.4 بالمائ المائ التي حققها النهج الأبطأ والأكثر استهلاكاً للطاقة. علاوة على ذلك، نجح النظام في العمل على بطاقة رسوميات لجهاز كمبيوتر محمول قياسي بذاكرة 8 جيجابايت فقط، وهو جهاز كان سينهار تحت وطأة النهج التقليدي.
إن تداعيات هذا العمل تمتد إلى ما هو أبعد من مجرد توفير الكهرباء. فبالنسبة لصناعات مثل حوكمة الطاقة، حيث تفرض قوانين صارمة بقاء البيانات محلياً وتحت سيطرة المؤسسة، تجعل هذه التقنية الذكاء الاصطناعي المتقدم أمراً ممكناً. فهي تثبت أن الذكاء الاصطناعي عالي الأداء لا يتطلب مراكز بيانات ضخمة ومركزية، بل يمكن تنفيذه محلياً على أجهزة عادية، مما يجعل التكنولوجيا متاحة للمؤسسات الأصغر ويضمن عدم خروج البيانات الحساسة من المقر أبداً. ويصف الباحثون نهجهم بأنه "الذكاء الاصطناعي الأخضر" (Green AI)، مؤكدين على أن الكفاءة يجب أن تكون هدفاً أساسياً جنباً إلى جنب مع الذكاء. ومن خلال جعل العملية دقيقة، وقابلة للتفسير، وقابلة للإثبات، فقد خلقوا مساراً للمؤسسات لتدقيق امتثالها وإدارة أنظمة الطاقة الخاصة بها بأدوات قوية ومستدامة في آن واحد. وتؤكد الدراسة أنه مع التصميم الصحيح، يمكننا الحصول على أفضل ما في العالمين: الفهم العميق لنماذج الذكاء الاصطناعي الضخمة دون التكاليف البيئية والعتادية الهائلة التي تصاحبها عادةً.
ملخص تقني: بنيات RAG المحلية المستدامة لحوكمة الطاقة
بيان المشكلة تتناول الورقة البحثية التوتر القائم بين المتطلبات الحسابية لتقنية "التوليد المعزز بالاسترجاع" (RAG) والقيود الصارمة لحوكمة الطاقة وسيادة البيانات. تعتمد نهجات "الذكاء الاصطنال الأحمر" (Red AI) الحالية المطبقة في سياق "سياق وقت الفهرسة" (index-time contextualization)—حيث يتم تلخيص كل جزء من المستند مقابل المستند بأكمله—على آلية الانتباه الذاتي التربيعي وتخزين مفتاح-قيمة (KV cache) ينمو خطياً. هذا النمط يدفع بمتطلبات الذاكرة لتتجاوز 8 جيجابايت من ذاكرة الفيديو (VRAM) لوحدات معالجة الرسومات الاستهلاكية، مما يجبر المؤسسات على الاعتماد على مراكز البيانات السحابية. ومع ذلك، غالباً ما لا يستطيع منظمو الطاقة والمراقبون تصدير معالجة البيانات إلى الخارج بسبب قواعد سيادة البيانات (مثل GDPR وAI Act) والحاجة إلى تدقيق امتثال محلي وقابل للدفاع عنه. التحديد يكمن في تحقيق RAG عالي الدقة على أجهزة حاسوب عادية دون التكاليف التربيعية للذاكرة والطاقة الناتجة عن السياق الكامل للمستند.
المنهجية يقترح المؤلفون بنية "الذكاء الاصطناعي الأخضر" (Green AI) تتمحور حول "سياق شرائح المستند" (Document Slice Contextualization) و**"وكيل توجيه ثنائي الطبقات" (Two-Tier Routing Agent)**، مصممة للعمل بالكامل على محطة عمل واحدة مزودة بوحدة معالجة رسومات بسعة 8 جيجابايت.
سياق شرائح المستند: بدلاً من تغذية المستند بالكامل للملخص لكل جزء، يحدد النظام "شريحة" محدودة من الأجزاء المجاورة حول الجزء المستهدف ci. يتم تحديد حجم الشريحة عبر نصف قطر سياقي k. وللتعامل مع حدود المستند، تقوم عملية التنفيذ بضبط الشريحة (clamping)، مما يضمن بقاء الجزء المستهدف مركزياً في نافذة السياق. هذا يحد من طول المطالبة (prompt length) إلى حجم ثابت بغض النظر عن طول المستند الإجمالي، مما يمنع تخزين (KV cache) من تجاوز الذاكرة الفيزيائية (VRAM).
وكيل توجيه ثنائي الطبقات: يحدد وكيل التوجيه نصف القطر الأمثل k لكل جزء قبل حدوث أي عملية تلخيص، وذلك باستخدام نفس النموذج اللغوي الصغير (SLM) الذي يقوم بعملية التلخيص.
الطبقة الأولى (بوابة حتمية): تحدد بوابة قائمة على التعبيرات النمطية (regex) "أجزاء الجداول" (الجداول المسلسلة أو التعليقات التوضيحية) وتخصص لها نصف قطر ثابتاً (k=2) دون استدعاء النموذج.
الطبقة الثانية (موجه SLM): بالنسبة للأجزاء غير الجدولية، يقوم الوكيل بعملية تمرير أمامي (forward pass) لرمز واحد لنموذج بـ 4 مليارات معلمة (Gemma 3 4B-it-qat). يقرر النموذج ما إذا كان الجزء "ذاتي الوصف" (مثل الملخصات، الاستنتاجات، المراجع) ولا يتطلب سياقاً (k=0، مع تخطي التلخيص) أو "يحتاج إلى جيران" (k=2).
تنفيذ خط الأنابيب (Pipeline): يعمل خط الأنابيب بالتتابع على وحدة معالجة رسومات واحدة لتجنب تبديل الذاكرة (memory swapping):
التوجيه والتلخيص: يخصص الموجه أنصاف أقطار؛ ويقوم الملخص بإنشاء ملخصات غنية بالسياق للأجزاء التي يكون فيها k>0.
التضمين والفهرسة: يتم تضمين النص المُثرى باستخدام nomic-embed-text-v1.5 وفهرسته في LanceDB.
الاسترجاع: يقوم نظام استرجاع هجين (BM25 + بحث متجه كثيف) بإعادة ترتيب النتائج باستخدام ColBERTv2.
المساهمات الرئيسية
صياغة الشرائح المحدودة: تقدم الورقة تعريفاً رسمياً لشرائح المستند المحدودة والمضبوطة عند الحدود، ونموذج تعقيد يثبت أن هذا النهج يقلل من عمل الانتباه في وقت الفهرسة من O(n3) (المستند الكامل) إلى O(n) (الشريحة المحدودة)، حيث n هو عدد الأجزاء.
سياسة التوجيه لكل جزء: تقدم آلية توجيه خفيفة الوزن تختار ديناميكياً نوافذ السياق، متخطيةً عملية التلخيص للأجزاء ذاتية الوصف تماماً. وهذا يقلل من استدعاءات الملخص وإجمالي رموز المطالبة (prompt tokens).
بروتوكول قياس الذكاء الاصطناعي الأخضر: تطبق الدراسة بروتوكولاً صارماً لمحاسبة الطاقة باستخدام CodeCarbon، لتتبع طاقة وحدة معالجة الرسومات، والمعالج، والذاكرة لإنشاء سجلات طاقة لكل تشغيل وتقديرات انبعاثات الكربون، مما يضمن قابلية التكرار.
الجدوى المحلية: تثبت قدرة خط أنابيب RAG عالي الدقة على العمل ضمن نطاق ذاكرة 8 جيجابايت لوحدة معالجة الرسومات في حاسوب محمول عادي (RTX 4060)، وهو مطلب حيوي لحوكمة الطاقة المحلية.
النتائج تم التقييم على 25 ورقة علمية (382 جزءاً، 250 سؤالاً متعدد الخطوات) وأربع وثائق سياسية من المفوضية الأوروبية:
الدقة: حقق خط الأنابيب الموجه استدعاءً (Recall@20) بنسبة 0.952، وهو غير مختلف إحصائياً عن خط الأساس للمستند الكامل (0.954) ومتفوق على شريحة k=3 الثابتة (0.945). كما حقق أعلى متوسط رتبة عكسية (MRR@20) وأعلى متوسط رتبة متوسطة (MAR@20).
الكفاءة:
الطاقة: قلل خط الأنابيب الموجه طاقة التوليد المتتبعة بنسبة 87.6% (من 106.7 واط/ساعة إلى 13.2 واط/ساعة) وانبعاثات ثاني أكسيد الكربون بنسبة 87.0% (من 21.8 جم إلى 2.8 جم) مقارنة بخط الأساس للمستند الكامل.
الوقت: انخفض وقت التوليد بنسبة 84.1% (من 54:54 إلى 8:45).
الذاكرة: حافظ النهج على تخزين (KV cache) ضمن حد 8 جيجابايت، بينما تطلب خط الأساس للمستند الكامل نافذة 30,000 رمز كانت ستؤدي إلى تبديل الذاكرة (paging) على نفس الأجهزة.
سلوك التوجيه: خصص الموجه متوسط نصف قطر قدره 1.37، متخطياً 32% من الأجزاء (معظمها الملخصات، المراجع، والاعترافات) وخصص k=2 للبقية. أكد هذا أن ليس كل جزء يتطلب سياق المستند الكامل.
المتانة عبر المجالات: في وثائق سياسة المفوضية الأوروبية، حافظ متغير نصف القطر الثابت (k=3) على الأداء ضمن 0.6 نقطة من خط الأساس مع توفير 71.8% من الطاقة.
الأهمية والادعاءات تدعي الورقة تقديم مسار PEP-AI (دقيق، قابل للتفسير، قابل للإثبات) لتدقيق الامتثال اللامركزي. من خلال تحديد السياق وتوجيه القرارات، تتيح البنية:
مقاييس قابلة للتكرار: يتم قياس الأداء مقابل معايير ذهبية مع اختبارات دلالة إحصائية.
قرارات قابلة للفحص: يتم تسجيل كل قرار توجيه مع أدلته (الاحتمالات اللوغاريتمية)، مما يسمح بمسارات التدقيق.
طاقة قابلة للتحقق: توفر سجلات الطاقة لكل تشغيل سجلاً قابلاً للإثبات للبصمة الكربونية لعملية الذكاء الاصطناعي.
يؤكد المؤلفون أن هذا النهج يسمح لهيئات حوكمة الطاقة بتشغيل أنظمة RAG متطورة وقابلة للدفاع عنها على أجهزة محلية عادية، مع الالتزام بلوائح سيادة البيانات دون التضحية بدقة سياق المستند الكامل. وتضع هذه الدراسة "السياق الموجه والمحدود" كخيار باريتو مهيمن، يقدم دقة شبه مثالية مع تكاليف زمن وطاقة أقل بشكل جذري.