PromptDecipher: Supporting AI Tutor Authoring Through Editable Simulated Interactions
لمعالجة الفجوة المتمثلة في ندرة قيام المعلمين باختبار روبوتات الدردشة الآلية للتدريس قبل نشرها، تقدم هذه الورقة نظام PromptDecipher، الذي يعمل على تبسيط عملية التأليف من خلال السماح للمعلمين بتصحيح استجابات الروبوت غير المرغوب فيها مباشرة في معاينة حية، مما يولد تلقائياً إعادة كتابة مستهدفة للمطالبات ويتحقق منها من خلال مسار ضمان الجودة.
المؤلفون الأصليون:Miina Koyama, Ruiwei Xiao, John Stamper
تخيل أنك معلم يرغب في بناء معلم آلي (AI tutor) مفيد لطلابك. في الوقت الحالي، تطلب منك معظم الأدوات القيام بشيء صعب للغاية: كتابة مجموعة ضخمة ومعقدة من التعليمات (تسمى "المطالبة النظامية" أو system prompt) بنص بسيط، على أمل أن يفهم الذكاء الاصطناعي بالضبط ما تعنيه. الأمر يشبه محاولة تعليم موظف جديد عبر تسليمه كتاب قواعد مكوناً من 50 صفحة لم يره من قبل، دون السماح له بالممارسة أبداً.
تجادل ورقة بحثية بعنوان "PromptDecipher" بأن هذه هي الطريقة الخاطئة للقيام بذلك. المعلمون خبراء في تقديم الملاحظات على عمل الطلاب، لكنهم ليسوا خبراء في كتابة الأكواد البرمجية أو التعليمات المعقدة للحواسيب.
المشكلة: "الصندوق الأسود" للتعليمات حالياً، إذا قام معلم بإنشاء "بوت" وقدم البوت إجابة سيئة، فعليه أن يخمن أي جزء من كتاب تعليماته الضخم تسبب في الخطأ، ثم يعيد كتابة ذلك الجزء، ويأمل في الحصول على نتيجة أفضل. وجد المؤلفون في دراسة شملت أكثر من 100 معلم أن قلة قليلة منهم قاموا فعلياً باختبار الـ "بوتات" الخاصة بهم قبل السماح للطلاب باستخدامها. الأمر يشبه قيام طاهٍ بتقديم طبق جديد لمطعم دون أن يتذوقه أولاً.
الحل: نهج "التعديل ثم الشرح" يقوم PromptDecipher بقلب السيناريو تماماً. بدلاً من كتابة التعليمات أولاً، تبدأ بلعب دور الطالب.
المحاكاة: أنت تدردش مع الـ "بوت" الجديد الخاص بك.
التصحيح: إذا قال الـ "بوت" شيئاً خاطئاً أو غير مفيد، فلا تعود إلى كتاب التعليمات. بدلاً من ذلك، تقوم ببساطة بتعديل استجابة الـ "بوت" هناك في نافذة الدردشة، وتعيد كتابتها لتقول بالضبط ما كنت تريده أن تقوله.
المترجم السحري: بمجرد الضغط على "إرسال"، يعمل النظام كمترجم فائق الذكاء. ينظر إلى تصحيحك ويسأل نفسه: "آه، إذاً المعلم أراد من الـ 'بوت' أن يطرح سؤالاً بدلاً من إعطاء الإجابة؟"
التحديث التلقائي: يقوم النظام بعد ذلك بإعادة كتابة كتاب التعليمات المخفي (المطالبة) تلقائياً ليتناسب مع تصحيحك. وهو يوضح لك التغييرات، مثل خاصية "تعقب التغييرات" في برنامج Word، حتى تتمكن من رؤية ما فعله.
فحص السلامة: قبل أن تتمكن من نشر الـ "بوت" الخاص بك، يقوم النظام بإجراء اختبار سريع. يتحقق مما يلي: "هل أدى إصلاح هذا الخطأ الواحد إلى كسر شيء آخر؟" إذا بدأ الـ "بوت" يتصرف بغرابة في سيناريوهات أخرى، فإنه يوقفك ويقول: "مهلاً، نحن بحاجة لإصلاح هذا أيضاً".
التشبيه: غرفة البروفات فكر في بناء معلم آلي كأنك تخرج مسرحية.
الطريقة القدة: تكتب نصاً ضخماً للممثل (الذكاء الاصطناعي) وتأمل أن يتقنه. إذا أخطأ في جملة، عليك أن تخمن أي جزء من النص يجب تغييره.
طريقة PromptDecipher: تشاهد الممثل وهو يؤدي. إذا قال الجملة الخاطئة، تتدخل وتقول: "لا، حاول قولها بهذه الطريقة". يأخذ النظام جملتك الجديدة ويجد كيفية إعادة كتابة النص لكي يتذكر الممثل قولها بهذه الطريقة في المرات القادمة. تستمر في القيام بذلك حتى يصبح الأداء مثالياً، ولن يسمح لك النظام بفتح أبواب المسرح (نشر الـ "بوت") حتى تنجح البروفة.
لماذا هذا الأمر مهم؟ هذا النظام يجبر المعلمين على العمل كمهندسي مراقبة جودة دون أن يدركوا ذلك حتى. من خلال جعل عملية "الإصلاح" سهلة ومألوفة (مجرد تعديل دردشة)، فإنه يضمن اختبار الـ "بوتات" وتحسينها بالفعل قبل أن يراها الطلاب الحقيقيون. يخطط المؤلفون لاستخدام هذه الأداة في دورة تدريبية لمئات من أساتذة الجامعات لمعرفة ما إذا كانت هذه الطريقة تساعدهم في بناء معلمين آليين أفضل وأكثر أماناً.
ملخص تقني: PromptDecipher
بيان المشكلة بينما أدت التطورات الأخيرة في النماذج اللغوية الكبيرة (LLMs) إلى إتاحة إنشاء روبوتات الدردشة التعليمية المدعومة بالذكاء الاصطناي إلى الجميع، فإن التأليف الفعال يتطلب تضافرًا لمهارات — تصميم التعلم، وتصميم التفاعل مع الذكاء الاصطناعي، وضمان الجودة (QA) — وهي مهارات تتجاوز عادةً خبرة التربويين. كشفت دراسة استطلاعية أجراها المؤلفون شملت 121 روبوت دردشة أنشأها معلمون في مساق مفتوح عبر الإنترنت (MOOC) بعنوان "الذكاء الاصطناعي للمربين" عن فجوة حرجة: بينما نجح المعلمون في تحديد المحتوى التعليمي، لم يقم أي منهم تقريبًا بإجراء اختبار منهجي قبل نشر الروبوتات الخاصة بهم للطلاب. وتتمثل المشكلة الجوهرية المحددة في عدم التوافق بين واجهات التأليف الحالية، التي تقدم محررات نصوص خام للأوامر البرمجية للنظام (system prompts)، وبين النماذج الذهنية للتربويين. فالمعلمون لديهم خبرة في تقديم التغذية الراجعة التصحيحية لعمل الطلاب، لكنهم يفتقرون إلى إطار عمل لتحديد سلوك الذكاء الاصطناعي من خلال أوامر اللغة الطبيعية المجردة. ونتيجة لذلك، يميل غير الخبراء إلى التعامل مع الأوامر البرمجية بشكل انتهازي بدلاً من النهج المنهجي، حيث يجدون صعوبة في ترجمة ملاحظات المخرجات غير المرغوب فيها إلى متطلبات ملموسة للأوامر البرمجية.
المنهجية: نظام PromptDecipher لمعالجة ذلك، يقدم المؤلفون PromptDecipher، وهو نظام قائم على الويب يعيد هيكلة سير عمل التأليف حول التفاعلات المحاكية القابلة للتعديل بدلاً من التحرير المباشر للأوامر البرمجية. ينقل النظام الوحدة الأساسية للتأليف من كتابة أمر برمجي للنظام إلى تصحيح استجابات الروبوت داخل معاينة دردشة حية.
يعمل سير العمل من خلال دورة "الاختبار-التصحيح-التحقق":
المحاكاة والتصحيح: يتفاعل المعلمون مع دردشة طالب محاكية، مع اختيار ملفات تعريف محددة للطلاب (مثل: "متعلم متعثر"، "مدخلات خارج الموضوع"). وعند مراجعة استجابة الروبوت، يقوم المعلم إما بتحديدها كاستجابة ناجحة أو بتعديل الاستجابة مباشرة لتعكس السلوك التربوي المنشود.
مسار الهندسة العكسية للأوامر: يؤدي تقديم التصحيح إلى تفعيل مسار آلي مكون من ثلاث خطوات:
تحليل الفرق (Diff Analysis): يقارن نموذج لغوي كبير بين الاستجابة الأصلية وتصحيح المعلم لاستنتاج القصد التربوي (على سبيل المثال، تحديد ما إذا كان يجب على الروبوت طرح سؤال متابعة بدلاً من تقديم إجابة مباشرة).
إعادة كتابة الأمر: بناءً على القصد المستنتج، يقترح النظام إعادة كتابة مستهدفة وموجزة أو إضافة إلى الأمر البرمجي الأساسي للنظام. يتم عرض هذا التحديث كفرق (diff) متتبع ويُقدم للمعلم للمراجعة.
التحقق من التراجع (Regression Verification): يتم تقييم الأمر البرمجي المعدل تلقائيًا مقابل مجموعة من سيناريوهات الاختبار المحددة مسبقًا. ويتم وضع علامة على أي حالات تراجع (حيث يؤدي الأمر الجديد إلى تعطل الحالات التي كانت ناجحة سابقًا) لتنبيه المعلم قبل المتابعة.
ضمان الجودة المفروض: عملية نشر الروبوت مقيدة هيكليًا؛ إذ يجب على المعلم إكمال دورة كاملة واحدة على الأقل من (اختبار-تصحيح-تحقق) قبل أن يتم نشر الروبوت. وهذا يضمن أن يكون ضمان الجودة نشاطًا أساسيًا وليس خطوة اختيارية.
المساهمات الرئيسية
إعادة هيكلة سير العمل: يقدم PromptDecipher نموذج تأليف قائم على التصحيح يتوافق مع خبرات التربويين الحالية في تقديم التغذية الراجعة، مما يخفض حاجز الدخول لإنشاء معلم ذكاء اصطناعي.
الهندسة الآلية للأوامر: يوفر النظام "مسار هندسة عكسية للأوامر" يقوم بترجمة تصحيحات البشر إلى تحديثات ملموسة لأمر النظام، مما يسد الفجوة بين القصد التربوي والتنفيذ التقني.
ضمان الجودة الهيكلي: من خلال دمج اختبار التراجع والتحقق مباشرة في سير عمل النشر، يفرض النظام ممارسات ضمان الجودة التي كان يتخطاها التربويون سابقًا.
النموذج الأولي الحي والنشر: يقدم المؤلفون نموذجًا أوليًا حيًا، وكودًا مصدريًا مجهول المصدر، وعرضًا توضيحيًا. ومن المقرر نشر النظام في مساق "الذكاء الاصطناعي للمربين" الذي يستهدف مئات من مدرسي التعليم العالي في خريف 2026.
النتائج والادعاءات لا يقدم البحث نتائج كمية من نشر خريف 2026، حيث يُعرض النظام كنموذج تجريبي ومقترح لدراسة مستقبلية. بدلاً من ذلك، تستند ادعاءات المؤلفين إلى الدراسة الاستطلاعية لـ 121 روبوت دردشة موجود بالفعل وعلى منطق التصميم للنظام الجديد.
يزعم المؤلفون أن PromptDecider يعالج نمط الفشل المحدد المتمثل في الاختبار غير المنهجي الملاحظ في دراستهم الاستطلاعية. ومن خلال تحويل مهمة هندسية مجردة إلى مهمة تربوية مألوفة (تصحيح الاستجابات)، يهدف النظام إلى زيادة معدلات الاختبار وتحسين جودة الأوامر البرمجية مقارنة بسير العمل التقليدي. ويفترض البحث أن هذا النهج يدعم المعلمين للقيام بأدوار (مهندس ضمان الجودة، مصمم التفاعل) التي قد يتجاهلونها لولا ذلك.
الأهمية تكمن أهمية PromptDecipher في توضيح كيف يمكن لتصميم واجهة التأليف أن يشكل سلوك التربويين على نطاق واسع. يتجاوز النظام مجرد توفير أدوات لهندسة الأوامر البرمجية؛ فهو يغير نموذج التفاعل بشكل جذري لفرض ضمان الجودة هيكليًا بدلاً من الاعتماد على الامتثال الطوعي. ينوي المؤلفون استخدام النشر القادم في المساق المفتوح (MOOC) لفحص ما إذا كان نموذج التأليف القائم على التصحيح سينجح في زيادة الاختبار المنهجي وإنتاج معلمين ذكاء اصطناعي بجودة أعلى مقارنة بسير عمل تحرير الأوامر التقليدي. وتشمل الاتجاهات المستقبلية المذكورة التوليد التلقائي لسيناريوهات الحالات الحدية (edge-case scenarios) ودمج إرشادات علوم التعلم لمساعدة المعلمين على التعرف على الاستراتيجيات التربوية التي تظهر من خلال تصحيحاتهم.